python爬虫,爬出来和源码不同怎么处理?-问答-阿里云开发者社区-阿里云

开发者社区> 丁大头大美女> 正文

python爬虫,爬出来和源码不同怎么处理?

2021-10-19 20:46:03 157 1

爬某网站,爬不到有效内容,这是为什么,怎么才能爬到具体的帖子内容?(附图是用下面的代码爬下来的内容)

image.png

image.png

取消 提交回答
全部回答(1)
  • 无敌小将
    2021-10-19 20:47:54
    已采纳

    您好,需要带上cookie才有数据,用一个seesion访问2次就行了。这个站点做了限制 有正确的cookie才能访问,第一次访问服务器会下发cookie 第二次带上就行,由于requests.session()会自动保存cookie所以访问2次就行了。 常见,而且这是比较初级的的反爬手段 image.png

    1 0
相关问答

3

回答

专有云升级aliyun-python-sdk-core后报错。而location-readonly.aliyuncs.com域名可以通过curl访问。

萌萌怪兽 2018-10-15 20:46:31 51474浏览量 回答数 3

6

回答

osscmd,一条命令上传和下载的python工具

wood23 2012-06-30 12:08:18 39852浏览量 回答数 6

5

回答

设置跨域资源共享CORS并使用JS表单PostObject直接上传到OSS

wood23 2015-02-12 08:11:09 40589浏览量 回答数 5

22

回答

爬虫数据管理【问答合集】

我是管理员 2018-08-10 16:37:41 146738浏览量 回答数 22

41

回答

OSS FTP工具发布啦

oss-dev 2015-12-23 16:58:56 65989浏览量 回答数 41

41

回答

【精品问答集锦】Python热门问题

小六码奴 2019-05-30 15:27:34 135447浏览量 回答数 41

249

回答

阿里云LNAMP(Linux + Nginx + Apache + MySQL + PHP)环境一键安装脚本

云代维 2014-02-14 15:26:06 302550浏览量 回答数 249

24

回答

【精品问答】python技术1000问(1)

问问小秘 2019-11-15 13:25:00 471174浏览量 回答数 24

30

回答

基础语言百问-Python

薯条酱 2017-05-17 18:01:13 64719浏览量 回答数 30

21

回答

OSS新手视频教程!

聚小编 2013-01-14 18:09:51 57971浏览量 回答数 21
3
文章
1920
问答
问答排行榜
最热
最新
推荐问答
相关电子书
更多
文娱运维技术
立即下载
《SaaS模式云原生数据仓库应用场景实践》
立即下载
《看见新力量:二》电子书
立即下载