发布网友 发布时间:2022-04-23 08:08
共3个回答
热心网友 时间:2022-05-03 10:20
我之前试过配置八爪鱼来搜集这些信息,但是发现采集流程的设计总是出问题,最后改成了用Python爬虫抓取,建议你也试一下。
方法:使用Python中的scrapy工具来抓取所需要的数据,如果要提高抓取速度的话,还可以用redis开启多线程抓取。(这里有一个现成的参考项目网页链接,只需要想好你想抓取的数据,按照步骤修改相应的代码就能大量抓取微博数据了。)
希望能对你有所帮助~
热心网友 时间:2022-05-03 11:38
点赞数采集的话,可以试试软件机器人工具小帮,我做推广的朋友在用它发文和采集推广数据,微博点赞数据好像他们也采集了,需要自己配置,但过程也不难,你能用八爪鱼,这个应该也不会有问题。
热心网友 时间:2022-05-03 13:13
可能是Xpath设置问题。