Python爬虫系列10-交易所股票、基金的数据采集与分析

简介: 当大家经历的事情多了,慢慢的遇到事情,就不会急躁,也不会消极负能量,而是很冷静地面对,然后鼓励自己,只要努力,一定可以越来越好,不要自己给自己压力。人生短短几十年,不要给自己留下了什么遗憾,想笑就笑,想哭就哭,该爱的时候就去爱,无谓压抑自己。学习如逆水行舟不进则退。

实战

第一步:确定要采集的目标,请求数据

今天我们要采集的网站关于基金股票一类的。
链接奉上:http://www.sse.com.cn/

image.png

image.png

今天我们要抓取的就是展示该图像的背后数据,Go 搞起。大家记得关注呀👍👍将持续更新。😁

import requests

url = 'http://yunhq.sse.com.cn:32041//v1/sh1/line/000001?begin=0&end=-1&select=time%2Cprice%2Cvolume&_=1635851354208'

# 请求网页
json_str = requests.get(url, headers={'Referer': 'http://www.sse.com.cn/market/price/trends/'}).text
   
print(json_str)
    

image.png

第二步:解析数据

import json

# 转换
data = json.loads(json_str)

print(data['line'])

image.png

第三步:保存数据

保存数据可以参照我前面写的爬虫博客;
有openpyxl、xlwt、pandas等excel保存方式;
也有讲txt、doc文档等保存方式。
如果不想保存数据,大家可以直接通过matplotlib、seaborn、pyecharts等绘制数据分析可视化图像。
image.png

image.png

在这个浮躁的时代;竟然还有人能坚持篇篇原创;

如果本文对你学习有所帮助-可以点赞👍+ 关注!将持续更新更多新的文章。

支持原创。感谢!

相关文章
|
9月前
|
存储 分布式计算 大数据
基于Python大数据的的电商用户行为分析系统
本系统基于Django、Scrapy与Hadoop技术,构建电商用户行为分析平台。通过爬取与处理海量用户数据,实现行为追踪、偏好分析与个性化推荐,助力企业提升营销精准度与用户体验,推动电商智能化发展。
|
9月前
|
数据采集 Web App开发 数据安全/隐私保护
实战:Python爬虫如何模拟登录与维持会话状态
实战:Python爬虫如何模拟登录与维持会话状态
|
9月前
|
JSON 算法 API
Python采集淘宝商品评论API接口及JSON数据返回全程指南
Python采集淘宝商品评论API接口及JSON数据返回全程指南
|
9月前
|
机器学习/深度学习 大数据 关系型数据库
基于python大数据的台风灾害分析及预测系统
针对台风灾害预警滞后、精度不足等问题,本研究基于Python与大数据技术,构建多源数据融合的台风预测系统。利用机器学习提升路径与强度预测准确率,结合Django框架实现动态可视化与实时预警,为防灾决策提供科学支持,显著提高应急响应效率,具有重要社会经济价值。
|
9月前
|
机器学习/深度学习 大数据 关系型数据库
基于python大数据的青少年网络使用情况分析及预测系统
本研究基于Python大数据技术,构建青少年网络行为分析系统,旨在破解现有防沉迷模式下用户画像模糊、预警滞后等难题。通过整合多平台亿级数据,运用机器学习实现精准行为预测与实时干预,推动数字治理向“数据驱动”转型,为家庭、学校及政府提供科学决策支持,助力青少年健康上网。
|
9月前
|
数据采集 存储 JSON
Python爬虫常见陷阱:Ajax动态生成内容的URL去重与数据拼接
Python爬虫常见陷阱:Ajax动态生成内容的URL去重与数据拼接
|
9月前
|
数据采集 自然语言处理 数据可视化
Python爬取B站视频评论区情感分析:从数据采集到价值挖掘
B站作为年轻人聚集地,评论蕴含丰富情感与趋势。本文详解如何用Python爬取评论,结合SnowNLP与jieba进行中文情感分析,并通过可视化挖掘用户情绪、消费意愿与内容反馈,助力精准运营与决策。
1215 0
|
自然语言处理 算法 Python
|
自然语言处理 算法 索引

推荐镜像

更多