利用python维护了一个资源库站点:http://lazyman.ys168.com/(懒人盘)

课余自学了四五年python了,利用python爬虫和自动化批量爬取电子书,网站等链接,利用selenium上传到懒人盘(我取名的)

01模块每天自动上新最新破jie软件,实用软件。selenium库太强大,模拟点击模拟登陆,完全模拟人工操作。已有数百个软件(下拉到最后可以看到历史软件合集)

04模块400多个实用站点,嗯,,,把别人的导航页的站点爬到懒人盘归类好。

重点来了,利用python批量从三秋等电子书网站爬下电子书网盘链接,在批量挂在懒人盘上。附目录。详细介绍看公众号发文:

知乎周刊还把这些网盘链接利用selenium批量保存到自己的网盘上,做成合集送给公众号粉丝。

昨天又批量爬了金融商业类电子书400多本放在11栏,打算有时间再利用python到查询豆瓣评分挑选出高分电子书做成合集赠送分享。

懒人盘作为方便粉丝取资源的站点,由于数据量大手工维护费劲,利用python可以批量上传,几百个链接资源卡用同一套代码就可以几分钟之内上传完,还不会有差错。

python爬虫遇到难爬的站点利用selenium可以无视任何限制,只要能打开就能爬下,缺点是效率比较低。

常规的利用requests加上BeautifulSoup解析就可以爬80%的站点

懒人盘会不断上新新资源。