jxsylar_个人页
jxsylar
文章
0
问答
1
视频
0
个人介绍
暂无个人介绍
擅长的技术
获得更多能力
通用技术能力：
-
Linux
初级
能力说明：
掌握计算机基础知识，初步了解Linux系统特性、安装步骤以及基本命令和操作；具备计算机基础网络知识与数据通信基础知识。
云产品技术能力：
暂时未有相关云产品技术能力~
阿里云技能认证
详细说明
暂无更多信息
2019年11月
-
11.06 15:35:21
回答了问题
2019-11-06 15:35:21
前端开发必懂之《Python连连问》
赞0 踩0 评论2
暂无更多信息
-
回答了问题
2019-11-06
前端开发必懂之《Python连连问》
请问一下关于网站数据是否可爬的标准。 1. 除了 robots 协议，是否还有其他标准？ 2. 那么当网站没有 robots 协议时，那么这个网站的数据是否可爬如何判定？毕竟 robots 协议只是约定俗成的，而不是一个规范。 3. 查看 robots 协议是查看当前域名还是顶级域名下的？比如：我想爬 a.b.com 的数据，首先看一下 robots 协议，那么我应该访问 a.b.com/robots.txt 还是 b.com/robots.txt ？ （以上问题仅从如何正规爬取网站数据的角度而言）赞0 踩0 评论2
滑动查看更多
暂无更多信息