求推荐一个爬虫类MCP,我想用来搭建舆情监测Agent,用什么好?

据说现在爬虫可以让AI处理了,有什么好用的爬虫MCP吗?

展开
收起
刻舟未必求剑 2025-11-23 21:45:20 70 分享 版权
1 条回答
写回答
取消 提交回答
  • 分享编程故事~

    我用过不少数据采集类的MCP,比如playwright-mcp,fetch-mcp、brightdata-mcp等,其中用的比较多的是brightdata-mcp,可以采集数据、搜索网页,解锁网页等功能。
    我还专门用它做了个显卡监测的智能体,是搭建上n8n的,跑起来很稳定。
    用brightdata-mcp的好处是它是基于亮数据的数据采集服务开发的,所以能自主的去处理网站的反爬机制,比如人机验证、ip限制、动态加载等,所以主打一个方便。
    其他的爬虫mcp各有各的特点,我觉得按需使用吧。

    2025-11-28 11:11:19
    赞同 95 展开评论

阿里云自主研发的通义大模型,凭借万亿级超大规模数据训练和领先的算法框架,实现全模态高效精准的模型服务调用。https://www.aliyun.com/product/tongyi

还有其他疑问?
咨询AI助理