爬虫爬https出错 400 请求报错
@黄亿华 你好，想跟你请教个问题： 为什么我把最新的代码WebMagic 0.6.1 更新到我本地了 ，在运行爬虫的时候，对于有些HTTPS的网页还是报错呢（比如爬https://www.digikey.com/），求解。 报错信息是： I/O exception (java.net.SocketException) caught when processing request to {s}->https://www.digikey.com:443: Connection reset ，但是在爬京东时候，https://www.jd.com程序又没有报错，爬取正常
写回答
-
Connection reset是连接被重置，你先自己用浏览器调用了看看呢？######
引用来自“黄亿华”的评论
Connection reset是连接被重置，你先自己用浏览器调用了看看呢？@黄亿华 黄老师我试过了自己用浏览器调用网站是没有问题的，比如https://www.digikey.com/product-detail/en/tdk-corporation/PS1240P02BT/445-2525-3-ND/935924 和http://www.digikey.com/product-detail/en/tdk-corporation/PS1240P02BT/445-2525-3-ND/935924，但是在爬虫的时候https这个的就会报Connection reset错
2020-05-31 17:24:37赞同 展开评论 打赏
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
