时间:2021-05-22
我们越来越多的使用pandas进行数据处理,有时需要向一个已经存在的csv文件写入数据,传统的方法之前我也有些过,向txt,excel文件写入数据,传送门:Python将二维列表(list)的数据输出(TXT,Excel)
pandas to_csv()只能在新文件写数据?当然不是!
pandas to_csv() 是可以向已经存在的具有相同结构的csv文件增加dataframe数据。
df.to_csv('my_csv.csv', mode='a', header=False)to_csv()方法mode默认为w,我们加上mode='a',便可以追加写入数据。
pandas读写文件,处理数据的效率太高了,所以我们尽量使用pandas的进行输出。
下面让我们来看一下示例
# -*- coding:utf-8 -*-import osimport timeimport pandas as pd from multiprocessing import Pool def merge(filename): return pd.read_csv('./fun_data/'+filename) if __name__ == "__main__": file_list = os.listdir('./fun_data') e1 = time.time() pool = Pool(20) result = pool.map(merge,file_list) pool.close() pool.join() e2 = time.time() print(e2 - e1) for i in result: i.to_csv('./static.csv',mode='a',encoding='utf-8',header=False,index=False) e3 = time.time() print(e3-e2)到此这篇关于利用pandas向一个csv文件追加写入数据的实现示例的文章就介绍到这了,更多相关pandas csv追加写入内容请搜索以前的文章或继续浏览下面的相关文章希望大家以后多多支持!
声明:本页内容来源网络,仅供用户参考;我单位不保证亦不表示资料全面及准确无误,也不保证亦不表示这些资料为最新信息,如因任何原因,本网内容或者用户因倚赖本网内容造成任何损失或损害,我单位将不会负任何法律责任。如涉及版权问题,请提交至online#300.cn邮箱联系删除。
追加写入:#-*-coding:utf-8-*-#a指定打开文件的模式,a为追加r为只读a=open('test.txt','a')a.write('追加写入'
python对csv文件追加写入列,具体内容如下所示:原始数据[外链图片转存失败(img-zQSQWAyQ-1563597916666)(C:\Users\in
本文实例讲述了PHP创建文件及写入数据(覆盖写入,追加写入)的方法。分享给大家供大家参考,具体如下:这里主要介绍了PHP创建文件,并向文件中写入数据,覆盖,追加
关于python3中的追加写入excel问题,这个问题坑了我几小时,其实加一个参数即可。因为之前有写好的excel,想追加写入,但是写入后却只有写入后的单元格格
实例如下所示://追加写入用户名下文件$code="001";//动态数据$json_string=file_get_contents("text.json")