服务器返回码
有2个网站，第一网站在没有安装第二个网站之前百度蜘蛛能够正常抓取，但是在安装第二个网站之后，2个网站能够正常打开。但是百度蜘蛛无法进行网站正常抓取，返回提示为：服务器错误：爬虫发起抓取，httpcode返回码是5XX。请协助解决，是否需要进行服务器其他相关配置。谢谢。
展开
收起
7
条回答
写回答
写回答
-
-
-
-
Re服务器返回码我的也是一样啊，每天都有这个提示
-------------------------
服务器错误：爬虫发起抓取，httpcode返回码是5XX 这几天全是500
2015-06-11 08:51:55赞同 展开评论 打赏 -
-
回1楼七七鱼的帖子百度测试了，抓取成功，返回码是200，IP地址也没有错误，但是在抓取异常里就提示：服务器错误：爬虫发起抓取，httpcode返回码是5XX。呵呵 ，好多天了一个收录都没有，老网站也停止收录了。同样的提示。
-------------------------
网址是jnrjkf.com ，哪位大神上去看看我的程序有什么问题吗？2个网站,现在蜘蛛只去1个，这个新的不去，很郁闷啊。
2015-06-07 11:12:35赞同 展开评论 打赏 -
去百度站长平台抓取测试下：http://zhanzhang.baidu.com/crawltools/index
如果这里抓取显示成功，点击详情，然后看看IP是不是你自己的，如果不是你服务器的，点击IP报错，会自动转为新服务器IP，你这样的情况一般是换服务器，老的关闭后出现这样的情况，如果能浏览器打开网站，那么蜘蛛也是可以打开的，如果浏览器打开要输入密码，同样蜘蛛也是不能打开。-------------------------
把你的情况，从何时开始，事件经过，按照从先到后的顺序，路列下，我给你分析分析
2015-06-07 11:03:36赞同 展开评论 打赏
滑动查看更多
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
相关问答
问答排行榜
最热
最新
推荐问答
