AI 助理
文档备案控制台
开发者社区 彭世瑜的博客 文章 正文

使用Pandas的read_html方法读取网页Table表格数据

2022-09-09 463
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介： 使用Pandas的read_html方法读取网页Table表格数据

image.png

完整代码


# -*- coding: utf-8 -*-
import pandas as pd
# 数据出现省略号
pd.set_option('display.width', None)
url = 'http://vip.stock.finance.sina.com.cn/q/go.php/vComStockHold/kind/jjzc/index.phtml'
# 可能有多个表格，我们取第一个
df = pd.read_html(url)[0]
# print(data)
# 保存数据
df.to_csv('./data.csv', encoding='utf-8')

打开读取的数据结果，效果还是非常不错的

image.png


更多的用法可以研究下文档


文章标签：
Python
关键词：
Pandas方法
HTML方法
HTML网页
Pandas网页
HTML数据
码农技术君
目录
相关文章
凉凉心.
|
7月前
|
Java 数据挖掘 数据处理
（Pandas）Python做数据处理必选框架之一！（一）：介绍Pandas中的两个数据结构；刨析Series：如何访问数据；数据去重、取众数、总和、标准差、方差、平均值等；判断缺失值、获取索引...
Pandas 是一个开源的数据分析和数据处理库，它是基于 Python 编程语言的。 Pandas 提供了易于使用的数据结构和数据分析工具，特别适用于处理结构化数据，如表格型数据（类似于Excel表格）。 Pandas 是数据科学和分析领域中常用的工具之一，它使得用户能够轻松地从各种数据源中导入数据，并对数据进行高效的操作和分析。 Pandas 主要引入了两种新的数据结构：Series 和 DataFrame。
凉凉心.
670 0
Deephub
|
10月前
|
自然语言处理 数据挖掘 数据处理
告别低效代码：用对这10个Pandas方法让数据分析效率翻倍
本文将介绍 10 个在数据处理中至关重要的 Pandas 技术模式。这些模式能够显著减少调试时间，提升代码的可维护性，并构建更加清晰的数据处理流水线。
Deephub
320 3
告别低效代码：用对这10个Pandas方法让数据分析效率翻倍
Deephub
|
12月前
|
数据采集 安全 数据挖掘
Pandas数据合并：10种高效连接技巧与常见问题
在数据分析中，数据合并是常见且关键的步骤。本文针对合并来自多个来源的数据集时可能遇到的问题，如列丢失、重复记录等，提供系统解决方案。基于对超1000个复杂数据集的分析经验，总结了10种关键技术，涵盖Pandas库中`merge`和`join`函数的使用方法。内容包括基本合并、左连接、右连接、外连接、基于索引连接、多键合并、数据拼接、交叉连接、后缀管理和合并验证等场景。通过实际案例与技术原理解析，帮助用户高效准确地完成数据整合任务，提升数据分析效率。
Deephub
1021 13
Pandas数据合并：10种高效连接技巧与常见问题
长梦
|
缓存 数据可视化 BI
Pandas高级数据处理：数据仪表板制作
在数据分析中，面对庞大、多维度的数据集（如销售记录、用户行为日志），直接查看原始数据难以快速抓住重点。传统展示方式（如Excel表格）缺乏交互性和动态性，影响决策效率。为此，我们利用Python的Pandas库构建数据仪表板，具备数据聚合筛选、可视化图表生成和性能优化功能，帮助业务人员直观分析不同品类商品销量分布、省份销售额排名及日均订单量变化趋势，提升数据洞察力与决策效率。
长梦
326 12
xcsharp2020
|
移动开发 前端开发 JavaScript
HTML5实现好看的劳动节网页源码
HTML5实现好看的劳动节网页源码，劳动节网页，劳动节网页源码，内置十个页面，各种模板都有，可以根据这些页面扩展更多页面，网页由网站首页、劳动节介绍、劳动节由来、劳动节习俗、劳动节文化、劳动节活动、劳动节故事、劳动节民谣、联系我们、登录/注册等页面组成，兼容手机端，页面干净整洁，内容丰富，可以扩展自己想要的，注释完整，代码规范，各种风格都有，代码上手简单，代码独立，可以直接运行使用。也可直接预览效果。
xcsharp2020
443 4
长梦
|
数据采集 存储 数据可视化
Pandas高级数据处理：数据报告生成
Pandas 是数据分析领域不可或缺的工具，支持多种文件格式的数据读取与写入、数据清洗、筛选与过滤。本文从基础到高级，介绍如何使用 Pandas 进行数据处理，并解决常见问题和报错，如数据类型不一致、时间格式解析错误、内存不足等。最后，通过数据汇总、可视化和报告导出，生成专业的数据报告，帮助你在实际工作中更加高效地处理数据。
长梦
420 8
xcsharp2020
|
移动开发 HTML5
HTML5实现好看的中秋节网页源码
HTML5实现好看的中秋节网页源码，中秋节网页，中秋节网页源码，节日网页大作业，作业源码，内置十个页面，各种模板都有，可以根据这些页面扩展更多页面，网页由网站首页、中秋节介绍、中秋节由来、中秋节习俗、中秋节文化、中秋节美食、中秋节故事、中秋节民谣、联系我们、登录/注册等页面组成，兼容手机端，页面干净整洁，内容丰富，可以扩展自己想要的，注释完整，代码规范，各种风格都有，代码上手简单，代码独立，可以直接运行使用。也可直接预览效果。
xcsharp2020
530 0
HTML5实现好看的中秋节网页源码
仙鹤童子```
HTML table表格元素边框修改为单线
HTML table表格元素边框修改为单线
仙鹤童子```
244 0
卡尔特斯
|
前端开发
HTML table 表格内容垂直对齐、边框颜色、标题
HTML table 表格内容垂直对齐、边框颜色、标题
卡尔特斯
275 0
码农技术君
Html：正确给table表格加边框
Html：正确给table表格加边框
码农技术君
285 0
Html：正确给table表格加边框