开发者社区 问答 正文

现在很多网站都有反爬技术,对于生产上,我们也是使用代理来解决的吗?

现在很多网站都有反爬技术,对于生产上,我们也是使用代理来解决的吗?

展开
收起
OSC开源社区 2024-05-28 23:22:32 49 分享 版权
1 条回答
写回答
取消 提交回答
  • 反爬虫技术有很多种,代理IP只是其中一种解决方案。要知道网站的反爬技术,需要做大量的测试才能得知。

    最为常见的是访问频率请求头Referer属性验证码用户登录访问限制等等。而大量数据处理一般做分布式数据库。

    2024-05-30 08:33:11
    赞同 展开评论
问答地址: