CSV文件合并

简介: CSV文件合并

我们爬取了大量微博热搜的数据并保存成CSV文件了。现在,我们来将这些CSV文件合并成一个文件,方便数据分析,具体代码如下:


import pandas as pdimport ospath='/Users/XXXXXX/微博热搜文件/weibo_20200814'name='Combined_20200814.csv'li=os.listdir(path)for i in li:  df=pd.read_csv(path+'/'+i,header=None,encoding='utf-8')  #print(df)  df.to_csv('/Users/XXXXX/微博热搜文件/'+name, mode='a', index=False, header=False) print('Finished!')

运行后的文件为:

这里简单用了一个pandas直接合并的,并未将后续的表头进行删除,删除指定表头的工作我们在后续处理中再继续进行,Bye!

相关文章
|
19天前
|
存储 Python
CSV文件
【10月更文挑战第18天】CSV文件
55 2
|
2月前
CSV文件合并(续)
CSV文件合并(续)
27 0
|
6月前
|
Java Apache
导出csv格式的文件
导出csv格式的文件
56 0
|
3月前
|
存储 Python
使用CSV模块读取CSV文件--含代码
使用CSV模块读取CSV文件--含代码
26 0
|
C# 数据库 Windows
C#开发:CSV文件写入
C#开发:CSV文件写入
226 0
|
数据处理
R|批量循环处理同一格式文件-csv,txt,excel
R|批量循环处理同一格式文件-csv,txt,excel
118 0
|
数据处理 Python
多线程操作CSV文件并且将CSV文件转成XLSX文件
多线程操作CSV文件并且将CSV文件转成XLSX文件
229 0
dataframe文件写入pickle文件和写入csv效率对比
dataframe文件写入pickle文件和写入csv效率对比
185 0
dataframe文件写入pickle文件和写入csv效率对比
|
关系型数据库 数据库 PostgreSQL
导出CSV文件
导出CSV文件
378 0
C#读取CSV
public class CSVFileHelper { /// /// 将DataTable中数据写入到CSV文件中 /// /// 提供保存数据的DataTable /// CSV的文件路径 public static voi...
2171 0