开发者社区 问答 正文

Python 获取 URL 的返回值问题:F12 能看到结果,但是直接访问却是404?报错

最近在用 Python 写一个金山快盘签到程序,在读一个链接的时候总是取不到实际返回的 JSON 数据。

使用 chrome 开发者工具是能看到具体的返回值的:

但是用浏览器打开链接就是404:

具体请求的数据有这些:

我把这些 Request Headers 里的内容都包在 urllib2 opener 的 addheaders 里了,但是请求的结果和浏览器直接访问是一样的:

经提醒,发现直接打开链接是 GET 请求,在 Firefox 下将请求改为 POST 后重发请求发现返回正常:

但是在 Python 代码中将请求改为 POST 请求仍旧无果,代码为:

#测试 POST 请求
url = 'http://web.kuaipan.cn/n/user/signin'
post_data = {'test': 'a'} #此为随便添加的 post 数据
request = urllib2.Request(url, urllib.urlencode(post_data))
conn = opener.open(request)
print conn.read()

报错信息:

希望有遇到过类似问题的朋友能提供点思路,谢谢!

展开
收起
爱吃鱼的程序员 2020-06-10 10:01:33 1337 分享 版权
1 条回答
写回答
取消 提交回答
  • https://developer.aliyun.com/profile/5yerqm5bn5yqg?spm=a2c6h.12873639.0.0.6eae304abcjaIB

    你最好对比一下正常范围值和404的请求和返回的header,一般会有差异的。回复<aclass='referer'target='_blank'>@zabcd117:个人觉得问题不在这块,因为我在Firefox下使用不是最新的X-XSRF-TOKEN编辑重发请求时也能得到数据(虽然status还是599)回复<aclass='referer'target='_blank'>@Amstrong:我又看了下,你这个url还包含csrf-token,一般就是来防止跨站提交的,你也需要这个值是实时准确的,需要先get一下这个页面,找到并获取到这个值(一般是js里面或者meta里面)才能行,不然也会有问题。回复<aclass='referer'target='_blank'>@zabcd117:cookie是最新的,但是还是失败了。。仍旧感谢~回复<aclass='referer'target='_blank'>@Amstrong:还有个问题,就是你header里面的cookie,是不是最新的?确保这个cookie是最新的。可以先在浏览器登录一下,把要访问页面的request的cookie拷贝到代码中,然后先测试获取这个页面的逻辑。如果没有问题,那你还需要解决一下登录获取cookie的问题。如果你的cookie也没有问题的话,我也不清楚问题出在哪里了回复<aclass='referer'target='_blank'>@zabcd117:我贴出来的只是部分代码,在之前我已经将cookie和header加在opener里面了

    2020-06-10 10:01:51
    赞同 展开评论