AwesomeTang
AwesomeTang_个人页
AwesomeTang
文章
19
问答
0
视频
0
个人介绍
Done is better than perfect.
擅长的技术
- Python
-
发表了文章 2018-09-02
Python爬取猫眼「碟中谍」全部评论
实现目标 昨天晚上看完碟中谍后，有点小激动，然后就有了这片文章。 我们将猫眼上碟中谍的全部评论保存下来，用于后期分析～ 总共评论3W条左右。
-
发表了文章 2018-08-22
Python实时爬取斗鱼弹幕
实现目标： 输入斗鱼房间号实时获取弹幕信息，实现效果如下： douyu.gif 逻辑梳理 首先说明下斗鱼是开放了弹幕API的，可以直接去他们开发者论坛查看文档，按照文档中要求一步一步的来就好了，我这边就简单梳理下： 建立两个线程：一个与弹幕服务器建立连接然后获取数据，一个定时发送心跳信息给弹幕服务器保持连接。
-
发表了文章 2018-08-05
pyecharts实现星巴克门店分布可视化分析
项目介绍 使用pyecharts对星巴克门店分布进行可视化分析： 全球门店分布/拥有星巴克门店最多的10个国家或地区； 拥有星巴克门店最多的10个城市； 门店所有权占比； 中国地区门店分布热点图。
-
发表了文章 2018-07-29
Python爬一下抖音上小姐姐的视频～
image.png 在简书也码了1W多字了，发现还是爬虫类的文章看的人多。 算法工程师现在都啥价位了，你们还在看爬虫→_→ 介绍 这次爬的是当下大火的APP--抖音，批量下载一个用户发布的所有视频。
-
发表了文章 2018-07-07
通过k-means进行图像量化压缩--python实现
image.png 逻辑梳理 对于电脑来说，每种颜色都会有一个对应RGB值，比如黑色是[0,0,0]，白色是[255,255,255]，所以RGB模式下，最多可以区分16581375(255的三次方)种颜色。
-
发表了文章 2018-07-01
Python使用itchat获取微信好友
最近发现了一个好玩的包itchat，通过调用微信网页版的接口实现收发消息，获取好友信息等一些功能，各位可以移步itchat项目介绍查看详细信息。 目标： 获取好友列表 统计性别及城市分布 根据好友签名生成词云 获取好友信息 前文说了，itchat其实是调用微信网页版的接口，所以登陆的时候会弹出二维码进行登陆，然后通过itchat.get_friends获取好友信息就好了，相当简单。
-
发表了文章 2018-06-30
NBA这三十年发生了什么，Python告诉你～
项目介绍 通过NBA近三十年的数据来看： 各项统计数据之间的相关性 整体风格上的变化 三分球的作用 数据介绍 关于数据源的介绍以及字段解释各位可以移步科赛网 查看，使用的数据源是 team_season.csv。
-
发表了文章 2018-06-02
Python爬取京东Iphone X用户评论并绘制词云
目标 爬取京东商城上iPhone X用户评论数据； 使用jieba对评论数据进行分词处理； 使用wordcloud绘制词云图。 目前京东商城只会展示商品的前100页评论，所以我们能爬取到的评论只有1000条。
-
发表了文章 2018-05-16
通过KNN算法预测数据所属NBA球员——Python实现
项目介绍 通过得分，篮板，助攻，出场时间四个数据来预测属于哪位球员。 选取了'LeBron James','Chris Paul','James Harden','Kevin Love','Dwight Howard'五位球员单场数据。
-
发表了文章 2018-04-19
使用selenium实现前程无忧简历自动刷新
image.png 使用过前程无忧，智联招聘等这些招聘网站的都知道，网站都会有一个简历刷新功能，hr那边检索简历都时候网站会根据求职者简历的刷新时间来进行排序，所以如果你想要你的简历排在前列，让hr一眼看见的话，那就勤刷新，隔段时间刷新一次，或者花钱购买网站提供的增值服务，帮你置顶。
-
发表了文章 2018-03-11
数据分析行业招聘职位分析报告--基于拉勾网
项目背景 大数据时代的到来让数据在公司决策上发挥了越来越大的作用，数据分析师也成为了各大企业的标配，那么各大企业又会愿意花多少代价来为数据买单呢？本文将通过从拉勾网爬取到的职位信息来展现「数据分析」职位究竟「钱」景如何： 哪些城市更需要数据分析人才，除了北上广深还有没有其他城市给我们惊喜； 哪些行业更需要数据分析人才，薪资如何； 目前数据分析职位要求的工作经验和学历是怎样： 我工作%n年了，该拿到多少工资才不至于拖后腿了。
-
发表了文章 2018-03-01
Python网易云音乐爬虫进阶篇
image.png 年前写过一篇爬网易云音乐评论的文章，爬不了多久又回被封，所以爬下来那么点根本做不了什么分析，后面就再改了下，加入了多线程，一次性爬一个歌手最热门50首歌曲的评论，算是进阶版了～ 思路梳理 进入歌手页可以看到展示了该歌...
-
发表了文章 2018-02-03
SQL中查询效率优化
使用索引 首先我们看下百度百科上的解释： 在关系数据库中，索引是一种单独的、物理的对数据库表中一列或多列的值进行排序的一种存储结构，它是某个表中一列或若干列值的集合和相应的指向表中物理标识这些值的数据页的逻辑指针清单。
-
发表了文章 2018-01-27
Python爬虫爬取网易云音乐全部评论
beautiful now.png 思路整理 访问网易云音乐单曲播放界面，我们可以看到当我们翻页的时候网址是没有变化的，这时候我们大致可以确定评论是通过post形式加载的； . 2.接下来就打开控制台找我们要的评论藏在哪里就好了。
-
发表了文章 2018-01-21
sql中筛选第一条记录
问题描述 我们现在有一张表titles，共有4个字段，分别是emp_no(员工编号)，title(职位)，from_date(起始时间)，to_date(结束时间)，记录的是员工在某个时间段内职位名称，因为会存在升职，转岗之类的，里面emp_no可能会对应多个职位，我们现在要取到所有员工最近的职位信息，包括离职员工。
-
发表了文章 2018-01-18
SQL中GROUP BY用法示例
概述 GROUP BY我们可以先从字面上来理解，GROUP表示分组，BY后面写字段名，就表示根据哪个字段进行分组，如果有用Excel比较多的话，GROUP BY比较类似Excel里面的透视表。
-
发表了文章 2018-01-17
Python使用BeautifulSoup爬取妹子图
最近突然发现之前写的妹子图的爬虫不能用了，估计是网站又加了新的反爬虫机制，本着追求真理的精神我只好又来爬一遍了! 效果 文件夹 妹子图 思路整理 页面地址：http://www.
-
发表了文章 2018-01-14
Oracle中字符串大小比较以及数据隐式转化
首先我们得明白在数据库中单引号是用来字符串引用的，不管是数字还是时间，当你用单引号引用起来之后，数据库就会将他当成字符串来对待。 我们先看下面两个语句： select from users where age > 30 select from users where age > ’30’ 其中age字段是varchar格式，全部都是数字，不要问我既然都是数字的为什么不用num类型。
-
发表了文章 2017-09-23
Python爬虫拉勾网
思路梳理 打开拉勾网输入职位信息，可以看到我们想要的数据，当我们翻页的时候可以发现地址是没有任何变化的，因此可以确定我们整个输入查询的过程是通过post请求和异步加载完成的 ; 打开控制台再次加载页面看看我们得到了什么，我们想要的职位信...
暂无更多信息
-
发表了文章
2018-09-02
Python爬取猫眼「碟中谍」全部评论
-
发表了文章
2018-08-22
Python实时爬取斗鱼弹幕
-
发表了文章
2018-08-05
pyecharts实现星巴克门店分布可视化分析
-
发表了文章
2018-07-29
Python爬一下抖音上小姐姐的视频～
-
发表了文章
2018-07-07
通过k-means进行图像量化压缩--python实现
-
发表了文章
2018-07-01
Python使用itchat获取微信好友
-
发表了文章
2018-06-30
NBA这三十年发生了什么，Python告诉你～
-
发表了文章
2018-06-02
Python爬取京东Iphone X用户评论并绘制词云
-
发表了文章
2018-05-16
通过KNN算法预测数据所属NBA球员——Python实现
-
发表了文章
2018-04-19
使用selenium实现前程无忧简历自动刷新
-
发表了文章
2018-03-11
数据分析行业招聘职位分析报告--基于拉勾网
-
发表了文章
2018-03-01
Python网易云音乐爬虫进阶篇
-
发表了文章
2018-02-03
SQL中查询效率优化
-
发表了文章
2018-01-27
Python爬虫爬取网易云音乐全部评论
-
发表了文章
2018-01-21
sql中筛选第一条记录
-
发表了文章
2018-01-18
SQL中GROUP BY用法示例
-
发表了文章
2018-01-17
Python使用BeautifulSoup爬取妹子图
-
发表了文章
2018-01-14
Oracle中字符串大小比较以及数据隐式转化
-
发表了文章
2017-09-23
Python爬虫拉勾网
滑动查看更多
暂无更多信息
暂无更多信息