Python考核内容

简介: Python考核内容

目标网站:

https://www.51moot.net/main/course?search_id=0&is_free=-1&page_index=0

前置环境需求

pip3 config set global.index-url https://repo.huaweicloud.com/repository/pypi/simple
pip3 config list
pip3 install --upgrade pip
pip3 install requests
pip3 install scrapy

爬取需求:前五页的以下内容

1、课程标题


2、主讲人


3、章节数


4、学习时长


5、学习人数


6、课程简介


文件保存需求:

将5页内容的所有课程以每门课程一个【课程名称.txt】文件的方式进行保存。

image.png



如果有异常链接:内容为空的try:except:跳过

image.png


页码逻辑:page_index=[0-4]

https://www.51moot.net/main/course?search_id=0&is_free=-1&page_index=0
https://www.51moot.net/main/course?search_id=0&is_free=-1&page_index=1
https://www.51moot.net/main/course?search_id=0&is_free=-1&page_index=2
https://www.51moot.net/main/course?search_id=0&is_free=-1&page_index=3
https://www.51moot.net/main/course?search_id=0&is_free=-1&page_index=4

所以一个循环搞定。


HTML-CSS拆解:

第一层CSS拆解


image.png


第二层CSS拆解

image.png





示例编码:

image.png

image.png




可以看到有一个多添加了uuid这样简单一些,我没做set去重。

image.png



提交需求:


1、项目压缩包


2、截图,截图要求如下:


image.png

相关文章
|
4月前
|
存储 缓存 数据处理
|
5月前
|
机器学习/深度学习 数据采集 前端开发
Python适合做什么?
Python适合做什么?【7月更文挑战第7天】
60 4
|
JSON NoSQL Redis
Python使用小结
Python使用小结
56 0
|
Python
Python:使用2to3将Python2转Python3
Python:使用2to3将Python2转Python3
99 0
|
BI 测试技术 Python
每天一个Python小技巧(4)
每天一个Python小技巧(4)
每天一个Python小技巧(4)
|
Python
Python小技巧
One For All!!! 导包 取别名 from math as foobar from module1 import open as open1 from module2 import open as open2 查找Python的模块位置 >>> import sys,pprint >>> pprint.
834 0
|
Web App开发 测试技术 程序员
|
索引 Python 机器学习/深度学习