主流爬虫代码常规 使用 python bs4 scrapy。这些我都断断续续写过一部分。不过总结起来代码只是为了实现减少重复劳动过程。
所以倾向已经使用工具。毕竟回到代码的小伙伴也少。而且要处理,utf8编码,翻页,反爬虫等一系列斗争。所以我就简单介绍几个工具。
GooSeeker,神箭手,八爪鱼,网络矿工。都挺好用一定程度减少入门难度。都要注册同时有些限制。导出数据要积分。这都可以理解毕竟要生存。
这里我推荐我自己用的比较顺手的软件。
VG浏览器v5 版本(限制采集时间1小时,常规的操作都可以采集完。不行可以分次采集)感觉比较良心,新版改成0.5个小时。不保证一直可用。毕竟都一直都在变化。
可以导出数据库,excel 文件。方便我对比撒选基金综合实力较强的
image.png
image.png











网友评论