开发者社区> 问答> 正文

关于微博数据提取,微博爬虫? 400 报错

关于微博数据提取,微博爬虫? 400 报错

@wertyliii 你好,想跟你请教个问题:

我看你之前做微博的数据抽取,我想问一下你们是用的自己写的爬虫吗?

微博的模拟登录是如何解决的呢?

我刚刚接触这一块,不知道如何入手....

展开
收起
爱吃鱼的程序员 2020-06-01 13:51:42 753 0
1 条回答
写回答
取消 提交回答
  • https://developer.aliyun.com/profile/5yerqm5bn5yqg?spm=a2c6h.12873639.0.0.6eae304abcjaIB

    我也不知道######

    是自己写的,模拟登陆这一块,网上有很多教程,可以搜一下看看。主要就是有个prelog

     

    ######

    推荐一个现成可用的:

    新浪微博爬虫[按微博昵称爬取]

    ######

    推荐使用神箭手云爬虫平台的新浪微博爬虫[按微博昵称爬取](网站进阶版)支持云端自动采集,实时更新信息~适合开发者!

    爬虫链接:http://www.shenjianshou.cn/index.php?r=market/configDetail&pid=207

    ######

    ForeSpider,爬微博的所有用户信息都是没有问题的, 现在这软件有免费版,高配版也很便宜。

    建议你去查一查。

    我之前用它采过豆瓣的全部影评,一天就采了几百万条数据,非常快,而且我只是用笔记本采的,并没有开服务器。可想而知他的强大了。

    2020-06-01 13:51:43
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Python第五讲——关于爬虫如何做js逆向的思路 立即下载
海量数据场景下的淘宝搜索智能——算法及实践 立即下载
海量数据场景下的淘宝搜索智能—算法及实践 立即下载