开发者社区> 科技小能手> 正文

Python爬虫爬数据写入到EXCEL中

2017-11-12 2343

简介：
+关注继续查看

Python抓数据写到EXCEL中。以前都是写到txt中然后再导入到excel。现在直接写到excel中。

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
#coding=utf-8
import xlwt
import requests
from bs4 import BeautifulSoup
import sys
reload(sys)  
sys.setdefaultencoding('utf8') 
#打开excel文件
data=xlwt.Workbook()
#获取其中的一个sheet
table=data.add_sheet('made')
# table.put_cell(0,2,1,'why',0)
# nrows=table.nrows
# ncols=table.ncols
# for i in range(nrows):
#  print table.row_values(i)
r=requests.get('http://html-color-codes.info/color-names/')
html=r.text
#print html
soup=BeautifulSoup(html,'html.parser')
trs=soup.find_all('tr')
row=0
col=0
for tr in trs:
    style=tr.get('style')
    tds=tr.find_all('td')
    td=[x for x in tds]
    name=td[1].text.strip()
    hex=td[2].text.strip()
    table.write(row,col,name)
    table.write(row,col+1,hex)
    table.write(row,col+2,style)
    row=row+1
    col=0
data.save('MADE.xls')

PS：本来用的是XLWD这个模块，但是在测试写入到单元格时候不知道为什么，写进去立刻读能读出来数据，但是再写数据就没了，，，，也就没怎么看了。直接用了XLWT。但是他需要每次都是新建一个EXCEL然后新建一个sheet，并不难打开已经存在的excel。。。。。。。好像有办法解决，，，后面有需要再看吧。

附一个打开修改已存在excel的办法

1
http://www.360doc.com/content/13/1119/16/11029609_330538996.shtml

再附一个xlwd的高级用法，包括修改字体设置格式等

1
http://www.xuebuyuan.com/1568560.html

这里面有合并单元格的操作

1
http://www.jb51.net/article/60510.htm


本文转自 努力的C 51CTO博客，原文链接:http://blog.51cto.com/fulin0532/1751697

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

Web App开发 数据采集 Python
Python爬虫 Python Excel 爬虫python Python爬虫爬数据
开发者社区 > 开发与运维 > 文章
云迁移中心
作者高分内容
更多
关于nginx keep-alive 参数的验证和心得 5160 python之文件的复制 5652 ntop的简单安装、配置及与cacti的整合 4162 expdp+compression性能测试 4205 CentOS通过DNSpod实现动态域名 9153
相关文章
HannYang
Python 帮同事用pandas快速筛选Excel文件
Python 帮同事用pandas快速筛选Excel文件
19 0
q4qlc6vqsegx4
python数据分析表格文档Excel数据分析器统计源码
python数据分析表格文档Excel数据分析器统计源码
15 0
HannYang
Python Excel表格列数的字母表达与数字的相互转换
Python Excel表格列数的字母表达与数字的相互转换
22 0
HannYang
python 用openpyxl库修改excel表格数据（实例）
python 用openpyxl库修改excel表格数据（实例）
21 0
HannYang
Python 用openpyxl库从excel表格中获取内容（实例）
Python 用openpyxl库从excel表格中获取内容（实例）
15 0
未闻Code
一日一技：Python写的csv文件，如何让 Excel 双击打开不乱码？
一日一技：Python写的csv文件，如何让 Excel 双击打开不乱码？
24 0
夏沫の梦
python合并多个excel
前言 代码编写 1.导包 2.定义位置和表头 3.获取要合并的所有exce表格 4.打开Exce文件 5.获取exce文件下的所有sheet 6.获取sheet下有多少行数据 7.获取sheet下的数据 8.主函数 完整代码 报错修改 另外 最后
33 0
会振刀的程序员
【Python从入门到实践5.0】将数据写入Excel表格
【Python从入门到实践5.0】将数据写入Excel表格
24 0
会振刀的程序员
【Python从入门到实践5.1】读取Excel表格数据
【Python从入门到实践5.1】读取Excel表格数据
23 0
程序员晚枫
Python自动化办公神器！1行代码实现文件转PDF，支持Word、Excel、PPT、TXT格式
自动化办公，小白适用
31 0
+关注
科技小能手
文章
问答
视频
作者高分内容
更多
关于nginx keep-alive 参数的验证和心得 5160 python之文件的复制 5652 ntop的简单安装、配置及与cacti的整合 4162 expdp+compression性能测试 4205 CentOS通过DNSpod实现动态域名 9153
文章排行榜
最热
最新
1 C++ STL容器和算法：详解和实例演示 39540
2 Go 方法接收器：选择值接收器还是指针接收器？ 38139
3 代码的简单设计五原则 31137
4 如何提高光伏发电效能异常检出效率的实践案例 28292
5 java 泛型 万字详解（通俗易懂) 28155
6 数据一致性比对（番外） 27422
7 阿里云检索分析服务Elasticsearch版内核持续优化 25294
8 【分布式技术专题】「分布式技术架构」手把手教你如何开发一个属于自己的限流器RateLimiter功能服务 21714
9 高性能的本地缓存方案选型，看这篇就够了！ 21561
10 Hive SQL on Flink 构建流批一体引擎 16096
11 PolarDB-X 致数据库行内人 (一) ~ 如何有效评测国产数据库的分布式事务 15329
12 实践教程之体验PolarDB-X分布式事务和数据分区 10373
13 Python3，自从掌握了这个方法，再也不用print进行调试了。 14622
14 现场直击：2023阿里云峰会精彩发布抢先看（内含福利） 335168
15 如何解决IoT数据入仓的客户实践 8640
16 如何在5分钟之内完成一个物联网统计指标？ 7243
17 大数据&AI产品月刊【2023年4月】 5423
18 ClickHouse创始人：融合数据库该“卷”的还是性能和速度 55376
19 阿里云联合埃森哲正式发布《跨国企业上云登陆区（Landing Zone）白皮书》 50785
20 除了价格降70%，关于对象存储预留空间你还需要了解这些 32362
1 AIGC创作家 163
2 当MySQL想恋爱，java和navicate抢着做媒婆 ------ java连接MySQL数据库 & navicat for MySQL 连接 155
3 亿视电子基于PolarDB-X打造能源数字基座实践 74
4 全面升级，重磅上线！容器服务ASK评测携大奖前来！ 68
5 阿里云丁宇：云上开发成为主流，Serverless 定义新范式 84
6 阿里云AI新品“通义听悟”，开放公测！ 1593
7 LeetCode算法小抄--二叉搜索树 129
8 小米基于 Flink 的实时数仓建设实践 154
9 阿里云OpenSearch重磅推出LLM问答式搜索产品，助力企业高效构建对话式搜索服务 726
10 阿里云“通义听悟”正式公测：用户可免费领100小时转写服务 7375
11 Bean异步初始化，让你的应用启动飞起来 5985
12 图解LeetCode——98. 验证二叉搜索树 11038
13 图解LeetCode——108. 将有序数组转换为二叉搜索树 103
14 Windows上的实用CMD命令 10909
15 关于编辑Windows的右键【新建】删除和添加 11187
16 SpringMVC总结_从RESTful到拦截器 10903
17 进阶篇丨链路追踪（Tracing）很简单：链路成本指南 6124
18 深度学习进阶篇[9]：对抗生成网络GANs综述、代表变体模型、训练策略、GAN在计算机视觉应用和常见数据集介绍，以及前沿问题解决 53
19 一口气整理三种不同运营商要素验证API的Java 接入代码 89
20 python异常处理 10718
相关课程
更多
Python基础快速入门实战教程
37802
8
去学习
推荐文章
现场直击：2023阿里云峰会精彩发布抢先看 AIGC主题征文开启，参与赢取富士拍立得 乘风伯乐招募令，邀请伯乐获取多重好礼！ 乘风者计划邀您入驻社区，精彩权益即刻享
相关电子书
更多
双剑合璧-Python和大数据计算平台的结合
立即下载
低代码开发师（初级）实战教程
立即下载
阿里巴巴DevOps 最佳实践手册
立即下载
相关实验场景
更多
Python入门
1407
2.0小时
去实验