AI 助理
文档备案控制台
开发者社区 彭世瑜的博客 文章 正文

使用Pandas的read_html方法读取网页Table表格数据

2022-09-09 598
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介： 使用Pandas的read_html方法读取网页Table表格数据

image.png

完整代码


# -*- coding: utf-8 -*-
import pandas as pd
# 数据出现省略号
pd.set_option('display.width', None)
url = 'http://vip.stock.finance.sina.com.cn/q/go.php/vComStockHold/kind/jjzc/index.phtml'
# 可能有多个表格，我们取第一个
df = pd.read_html(url)[0]
# print(data)
# 保存数据
df.to_csv('./data.csv', encoding='utf-8')

打开读取的数据结果，效果还是非常不错的

image.png


更多的用法可以研究下文档


文章标签：
Python
码农技术君
目录
相关文章
Deephub
|
自然语言处理 数据挖掘 数据处理
告别低效代码：用对这10个Pandas方法让数据分析效率翻倍
本文将介绍 10 个在数据处理中至关重要的 Pandas 技术模式。这些模式能够显著减少调试时间，提升代码的可维护性，并构建更加清晰的数据处理流水线。
Deephub
453 3
告别低效代码：用对这10个Pandas方法让数据分析效率翻倍
跃@sir
|
存储 移动开发 前端开发
HTML基础知识：构建网页的基石
【10月更文挑战第11天】HTML基础知识：构建网页的基石
跃@sir
866 0
34789737
|
缓存 JavaScript 前端开发
Vue 项目中动态添加 HTML 元素的方法与实践
本文探讨了 Vue 中动态添加 HTML 元素的多种技术方案，包括条件渲染（v-if/v-show）、动态组件（component :is）、手动挂载（$mount）及 Vuex 状态管理等方法。通过实例分析，如动态表单生成器与全局模态框服务，展示了这些方案在实际开发中的应用。同时提供了性能优化建议和注意事项，帮助开发者根据需求选择最佳方式，在保持 Vue 响应式特性的同时实现灵活交互。附带代码示例，便于理解和实践。
34789737
791 2
xcsharp2020
|
移动开发 前端开发 JavaScript
HTML5实现好看的劳动节网页源码
HTML5实现好看的劳动节网页源码，劳动节网页，劳动节网页源码，内置十个页面，各种模板都有，可以根据这些页面扩展更多页面，网页由网站首页、劳动节介绍、劳动节由来、劳动节习俗、劳动节文化、劳动节活动、劳动节故事、劳动节民谣、联系我们、登录/注册等页面组成，兼容手机端，页面干净整洁，内容丰富，可以扩展自己想要的，注释完整，代码规范，各种风格都有，代码上手简单，代码独立，可以直接运行使用。也可直接预览效果。
xcsharp2020
872 4
奔跑的数据
|
数据采集 前端开发 数据挖掘
利用 html_table 函数轻松获取网页中的表格数据
本文介绍了如何使用 R 语言中的 `html_table` 函数结合代理 IP 技术，轻松提取网页表格数据并规避反爬机制。通过设置代理和请求头，示例代码展示了如何从 58 同城采集租房信息并保存为 CSV 文件。该方法适用于需要频繁采集数据的场景，确保数据采集的高效和稳定性。
奔跑的数据
744 2
利用 html_table 函数轻松获取网页中的表格数据
xcsharp2020
|
移动开发 前端开发 JavaScript
HTML5实现好看的端午节网页源码
HTML5实现好看的端午节网页源码，包含十个页面：网站首页、端午节介绍、由来、习俗、文化、美食、故事、民谣、联系我们及登录/注册。页面设计简洁美观，内容丰富，兼容手机端，代码规范且注释完整，易于扩展和修改。提供完整的源码下载和视频演示，方便学习和使用。
xcsharp2020
611 3
xcsharp2020
|
移动开发 HTML5
HTML5实现好看的中秋节网页源码
HTML5实现好看的中秋节网页源码，中秋节网页，中秋节网页源码，节日网页大作业，作业源码，内置十个页面，各种模板都有，可以根据这些页面扩展更多页面，网页由网站首页、中秋节介绍、中秋节由来、中秋节习俗、中秋节文化、中秋节美食、中秋节故事、中秋节民谣、联系我们、登录/注册等页面组成，兼容手机端，页面干净整洁，内容丰富，可以扩展自己想要的，注释完整，代码规范，各种风格都有，代码上手简单，代码独立，可以直接运行使用。也可直接预览效果。
xcsharp2020
845 0
HTML5实现好看的中秋节网页源码
疯狂的猿
HTML在线扫雷游戏网页源码
HTML在线扫雷游戏网页源码是一款基于HTML+CSS+JavaScript开发的在线扫雷小游戏单页源码，为用户提供了一个无需安装即可在浏览器中直接玩的扫雷游戏。该游戏的源码不仅包含了完整的游戏逻辑，还具备丰富的界面设计和用户交互功能，使得玩家能够轻松上手并享受扫雷带来的乐趣。
疯狂的猿
801 22
小白学大数据
|
数据采集 前端开发 API
SurfGen爬虫：解析HTML与提取关键数据
SurfGen爬虫：解析HTML与提取关键数据
小白学大数据
490 6
站大爷
|
数据采集 机器学习/深度学习 数据挖掘
利用Beautiful Soup和Pandas进行网页数据抓取与清洗处理实战
本文通过一个实战案例，介绍如何使用Python中的Beautiful Soup库抓取网页数据，并用Pandas进行清洗和处理。首先，确保安装了requests、beautifulsoup4和pandas库。接着，通过requests获取HTML内容，使用Beautiful Soup解析并提取新闻标题、发布时间和正文。然后，利用Pandas对数据进行清洗，包括去除多余空格、替换特殊字符、删除无效数据等。最后，根据需求进行数据处理（如过滤关键词）并保存为CSV或Excel文件。这个案例适合初学者和有一定经验的用户，帮助快速掌握这两个强大的工具。
站大爷
786 3

热门文章

最新文章

  • 1
    pandas.to_numeric转化数据为数字型
  • 2
    Pandas获取SQL数据库read_sql()函数及参数一文详解+实例代码
  • 3
    建模常用的pandas语句
  • 4
    Pandas时间序列处理：日期与时间
  • 5
    pandas玩转excel_pandas操作excel_pandas读写excel
  • 6
    Pandas数据应用：电子商务数据分析
  • 7
    Pandas read_csv 参数详解
  • 8
    Python 之 Pandas 处理字符串和apply() 函数、applymap() 函数、map() 函数详解
  • 9
    Python 教程之 Pandas（6）—— DataFrame 中的转换函数
  • 10
    Pandas+ SLS SQL：融合灵活性和高性能的数据透视
  • 1
    基于 Cloudflare Workers 构建高性能知识库镜像服务：反向代理与 HTML 动态重写实践
    1722
  • 2
    C#编程实践：解析HTML文档并执行元素匹配
    532
  • 3
    响应式企业网站源码JavaL/PHP带后台管理​：Bootstrap HTML5模板
    1548
  • 4
    精选HTML、JavaScript、ASP代码片段集锦
    567
  • 5
    HTML表单验证：确认input元素输入为具有特定整数和小数位数的数值。
    943
  • 6
    阻止HTML input元素（type='number'）中输入字母'e'的方法。
    534
  • 7
    仿真银行app下载安装， 银行卡虚拟余额制作app，用html+css+js实现逼真娱乐工具
    3722
  • 8
    Vue 项目中动态添加 HTML 元素的方法与实践
    791
  • 9
    Vue 动态添加 HTML 元素组件封装使用方法及长尾关键词优化指南
    465
  • 10
    Vue 动态添加 HTML 元素组件封装使用方法及长尾关键词优化指南
    494

    • 相关课程

    更多
  • Python 数据分析库 Pandas 快速入门
  • HTML 入门与实战
  • HTML基础入门学习
  • HTML5 新特性教程
  • 零基础学前端HTML+CSS

    • 相关电子书

    更多
  • 天猫HTML5互动技术实践
  • 中文：即学即用的Pandas入门与时间序列分析
  • 即学即用的Pandas入门与时间序列分析
    • 下一篇
    一条命令迁移，帮你实现 OpenClaw 与 Hermes Agent 记忆互通！