mica-http 从 http 工具到爬虫【二】-阿里云开发者社区

开发者社区> 开发与运维> 正文

mica-http 从 http 工具到爬虫【二】

简介: 1. 介绍      本篇接上篇《mica-http 完全使用指南》,mica-http 自从 v1.1.3 加入到 mica 最近几周一直在打磨,逐渐成为了一个轻量级爬虫工具。      注意:今天的文章主要是图博,部分功能会在 mica v1.1.7 正式发布,欢迎 star。

1. 介绍

     本篇接上篇《mica-http 完全使用指南》,mica-http 自从 v1.1.3 加入到 mica 最近几周一直在打磨,逐渐成为了一个轻量级爬虫工具。

     注意:今天的文章主要是图博,部分功能会在 mica v1.1.7 正式发布,欢迎 star

2. 爬虫代理和重试

001.png

3. 爬取页面

002.png

4. 模型

image.png

004.png

5. 页面效果

image.png

6. 结果

image.png

文档

开源推荐

版权声明:本文首发在云栖社区,遵循云栖社区版权声明:本文内容由互联网用户自发贡献,版权归用户作者所有,云栖社区不为本文内容承担相关法律责任。云栖社区已升级为阿里云开发者社区。如果您发现本文中有涉嫌抄袭的内容,欢迎发送邮件至:developer2020@service.aliyun.com 进行举报,并提供相关证据,一经查实,阿里云开发者社区将协助删除涉嫌侵权内容。

分享:
开发与运维
使用钉钉扫一扫加入圈子
+ 订阅

集结各类场景实战经验,助你开发运维畅行无忧

其他文章