开发者社区> 问答> 正文

网站消耗大量资源被关停

网站消耗大量资源被关停
几天时间关了两次了,只有最后一次了。
查了下,应该是搜索引擎短时间爬的太多的问题。
请问如何限制短时间内爬虫访问过多的问题?
毕竟你们是专业的,而且经验丰富,能给一些参考意见吗?

展开
收起
1448158908376278 2019-02-11 11:20:41 971 0
1 条回答
写回答
取消 提交回答
问答排行榜
最热
最新

相关电子书

更多
《阿里云资源保障服务,让您从容应对资源波峰》 立即下载
BGP公网省钱秘密: 共享带宽/共享流量包 立即下载
资源管理之道 立即下载