黄兵的博客_个人页

2022年07月

• 07.07 15:37:54
  发表了文章 2022-07-07 15:37:54

  反爬虫的重点：识别爬虫

  我们在网站运营的时候，最大的问题就是：我们自己花费几个小时甚至是几天辛辛苦苦创作作的内容，被爬虫只需要 1s 就抓去了。为了保卫我们创作的成果，也为了网站的稳定运行，我们需要对爬虫说：No，我们在反爬虫的过程中最重要的就是如何识别爬虫。

  

2022年06月

• 06.30 15:51:29
  发表了文章 2022-06-30 15:51:29

  什么是网络爬虫？

  网络爬虫是一种在 Internet 上运行自动化任务的软件应用程序。与人类互联网活动相比，网络爬虫运行的任务通常很简单，并且执行速度要快得多。

  
• 06.30 15:23:52
  发表了文章 2022-06-30 15:23:52

  可在线接收验证短信的网站

  现代社会中大多数人容易忘记密码，因此，为了方便，各大网站或者APP就相继出现以手机号码进行短信验证来注册和登录等操作。但此时，大多个人手机号码都已经是实名认证的，就非常怕存在个人信息泄露的情况。近几年网络平台用户数据泄露事件层出不穷，勿论一般平台，甚至一些全球知名企业也曾被曝出用户数据泄露问题，那基于此我们用户又能做点什么呢？ 那么临时的在线免费短信接收验证码的网站就应运而生。

  
• 06.30 15:12:55
  发表了文章 2022-06-30 15:12:55

  2022 年推荐免费在线接收短信平台（国内、国外）

  现代社会中大多数人容易忘记密码，因此，为了方便，各大网站或者 APP 就相继出现以手机号码进行短信验证来注册和登录等操作。但此时，大多个人手机号码都已经是实名认证的，就非常怕存在个人信息泄露的情况。近几年网络平台用户数据泄露事件层出不穷，勿论一般平台，甚至一些全球知名企业也曾被曝出用户数据泄露问题，那基于此我们用户又能做点什么呢？

  

2022年04月

• 04.28 17:22:30
  发表了文章 2022-04-28 17:22:30

  爬虫数据采集

  经常有小伙伴需要将互联网上的数据保存的本地，而又不想自己一篇一篇的复制，我们第一个想到的就是爬虫，爬虫可以说是组成了我们精彩的互联网世界。

  

2021年12月

• 12.09 16:22:24
  发表了文章 2021-12-09 16:22:24

  爬虫系列：使用 MySQL 存储数据

  爬虫系列：使用 MySQL 存储数据

  
• 12.09 15:59:26
  发表了文章 2021-12-09 15:59:26

  爬虫系列：存储 CSV 文件

  爬虫系列：存储 CSV 文件

  
• 12.06 14:49:54
  发表了文章 2021-12-06 14:49:54

  IPv6 私有地址

  IPv6 私有地址

  

2021年11月

• 11.09 14:57:57
  发表了文章 2021-11-09 14:57:57

  如果通过 IP 判断是否是爬虫

  如果通过 IP 判断是否是爬虫

  

2021年10月

• 10.28 16:22:10
  发表了文章 2021-10-28 16:22:10

  爬虫系列：使用 API

  爬虫系列：使用 API

  
• 10.19 11:12:36
  发表了文章 2021-10-19 11:12:36

  爬虫系列：数据采集

  上一期只是一个简单的例子，获取了网站的一小部分内容，本期开始讲解需要获取网站的所有文章列表。

  
• 10.12 15:42:08
  发表了文章 2021-10-12 15:42:08

  什么是 IP 地址 – 定义和解释

  IP 代表“互联网协议”，它是控制通过互联网或本地网络发送的数据格式的一组规则。

  
• 10.12 15:38:25
  发表了文章 2021-10-12 15:38:25

  如何通过 User-Agent 识别百度蜘蛛

  如何通过 User-Agent 识别百度蜘蛛

  
• 10.12 15:34:10
  发表了文章 2021-10-12 15:34:10

  爬虫系列：爬虫介绍

  在大数据深入人心的时代，网络数据采集作为网络、数据库与机器学习等领域的交汇点，爬虫技术已经成为满足个性化网络数据需求的最佳实践。