小白爬虫第一篇——抓取淘宝文胸数据

小白爬虫系列的文章，顾名思义都是写给小白的，每一篇都是楼主都会选择一个网站进行实战，因为楼主觉得爬虫是一个力气活，只有在实战中才能提高战力啊。好了，话不多说，我们选择的第一个网站是淘宝，当然这次不是大规模抓取，大规模留到进阶篇。首先我们打开淘宝的首页，然后在搜索栏输入文胸（这里只是以文胸为例子，你喜欢写啥就写啥，本人测试无论输入哪种商品都可以），结果如图:

这里都是琳琅满目的文胸，然后楼主去网页的源代码看了看，商品的具体数据是JS动态加载的，不在源代码里面的，那么我们就找嘛，毕竟每页这么多的商品数据，找到这个JS文件也不难，因为淘宝的商品太多了，楼主就简单切换一下页数，果然在切换的时候抓到了这个js请求文件，如图

打开这个文件可以看到都是我们需要的商品数据

抓到这个文件就好办了，我们先分析一下这个请求，如图

这里的URL是超级长，当然我们可以适当调整的，url里面的很多参数去掉也是没有关系的,我们先把这个URL直接复制到浏览器打开，看看结果，如图

data_dict就是那份淘宝数据解析成的字典，要取到后面第四个key，后面的数据才是我们要的商品数据

页数都是有数字规律的，当然第一篇我们简单爬取就好了，等我下几篇教会了大家如何写简单的代理池，我们再回来大规模爬微信或者京东淘宝这些网站，我们慢慢来。

好了，本篇实战介绍到这里，下次带带大家爬一爬链家某个区域房子的数据，保准学会，超级简单。