入门客AI创业平台(我带你入门,你带我飞行)
博文笔记

用Python将较大内容写入文件的注意事项

创建时间:2017-11-30 投稿人: 浏览次数:164

在我们利用python做数据分析时,往往会产生较大的数据,这时我们要将数据内容写入文件中一般有两个方法:

1.  利用python的pandas库的数据结构DataFrame将每次处理的结果先存起来,最后等所有的处理过程结束,用DataFrame的方法如to_csv等将内容写入文件

2.  利用outfile.write( )一边处理数据,一边将处理结果写入文件

从实践的情况来看,当写非常大的数据内容到文件时,方法1会消耗大量缓存,最后可能导致死机,而方法2要好很多。

声明:该文观点仅代表作者本人,入门客AI创业平台信息发布平台仅提供信息存储空间服务,如有疑问请联系rumenke@qq.com。