javbus 爬虫 - 老司机你值得拥有

起因有个朋友叫我帮忙写个爬虫,爬取 javbus5 上面所有的详情页链接,也就是所有的 https://www.javbus5.com/SRS-055 这种链接,我一看,嘿呀,这是司机的活儿啊,我绝对不能辱没我老司机的名声(被败坏了可不好),于是开始着手写了构思爬虫调度启动程序 crawler.py 页面下载程序 downloader.py 页面解析程序 pageparser.py 数据库入库与去重管理程序 contro

突破百度云限速与网页限制批量下载

百度云限速比较坑,现在基本 200k 左右很多人都知道了,但是总有朋友问我,我说明一下首先下载 IDM(最好支持正版) 下载链接:百度云 shaoit 开始下载:一般的话,小文件直接打开浏览器就可以下载大文件下载:首先在 chrome 浏览器中装上一个 User-AgentSwitcherfor(Google)Chrome 插件, 然后选择安卓手机,也就是打开这个的手机页面,然后直接用 IDM 下载批量下载与外链获取使用这个

基于 Openwrt+Shadowsocks+ipv6 实现校园网免流量无限时长上网

转载自 Dyhube 简述笔者利用笔记本电脑实现 ipv6 免费上网已经有一段时间了,原理是通过 ipv6 访问 ipv4 资源,在学校网络不限流量、不限时长、20 兆带宽(我们学校 ipv6 限速上下对等 20 兆,没办法!), 电脑开热点全寝室共用,那真是爽翻天! 但是每天回到寝室总是打开电脑开热点还真是蛋疼的事情。再说电脑也不能总是开着吧。这时我就想能不能找个路由器,一天二十四小时开机,电脑、手机、平板随时都可以连。这个想

OpenWRT 路由器使用 ipv6 拨号上网教程

文章来源于群友,如有侵权,请联系我 (aha971030@gmail.com) 删除原理介绍分析:湖北 E 信地区可以使用 ipv6 拨号,好处是网络是上下对等不限速网络,也就是说,你的端口上限是多少,网上就可以达到多少,我测试很多次,一般在 100M 左右,但是遗憾的是,该拨号方式只能使用 32 位系统,且由于 E 信软件的兼容性问题,很容易导致蓝屏死机。经过大神的抓包分析,该拨号方式是使用 ipv6 的隧道协议传递 ipv4