scrapy爬取淘宝商品页的问题 400 请求出错
之前用scrapy官方的模板稍加该变就可以成功的爬取一些网页，博客什么的，用sel.XPath()爬取指定问题也可以成功.
但是在爬取淘宝商品页的内容时出现了问题。一开始以为是Xpath 出错
但是退出的时候发现
就是说网页
https://item.taobao.com/item.htm?spm=a21dc.7837624.89077.2.d2VSRc&id=13505587887
后面的“&id=……”
部分号线没有搞进去
再试了试
response.body()
发现是结果是
‘ ’
怎么回事勒
看了很多网上大神的博文，说是动态网页什么的，也不是很懂
有大神帮我解答下吗？
展开
收起
1
条回答
写回答
写回答
-
2020-05-28 16:36:58赞同 展开评论 打赏
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
相关问答
