qoder cn访问网页很多网页都被拦截,包括但不限于:知乎、github、微信公众号文章等等,但是用户平时会经常用到,能不能优化网站抓取功能
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
Qoder CN 抓取知乎、GitHub、微信公众号等页面被拦截,不是 bug,而是这些平台本身的反爬机制导致的。Qoder CN 默认的网页抓取工具(WebFetch)走的是服务端请求,没有登录态和真实浏览器环境,很容易被识别为爬虫并返回空白或登录提示。
官方其实已经提供了解决方案:QoderWork Browser Connector(Chrome 插件)。它让 Agent 直接复用你本地 Chrome 的登录状态和真实浏览环境,绕过大部分反爬限制。安装后在任务中启用“我的浏览器”连接器即可,知乎、公众号等需要登录的平台都能正常读取。
如果你用的是 IDE 插件版而非 QoderWork,目前确实没有同等能力,建议切换到 QoderWork 桌面端或使用 Browser Use 模块。这个问题本质是目标网站的防护策略,不是 Qoder CN 单方面能“优化”的,换用真实浏览器通道是目前最可靠的解法。