如何在Python中分割大文件csv文件(7GB) [英] How can I split a large file csv file (7GB) in Python
本文介绍了如何在Python中分割大文件csv文件(7GB)的处理方法,对大家解决问题具有一定的参考价值,需要的朋友们下面随着小编来一起学习吧!
问题描述
我有一个7GB的 csv
文件,我想分成更小的块,所以它是可读,更快的分析在笔记本上的Python。
I have a 7GB csv
file which I'd like to split into smaller chunks, so it is readable and faster for analysis in Python on a notebook. I would like to grab a small set from it, maybe 250MB, so how can I do this?
推荐答案
你不需要这么做需要Python来拆分csv文件。使用您的shell:
You don't need Python to split a csv file. Using your shell:
$ split -l 100 data.csv
将分割100行的 data.csv
。
这篇关于如何在Python中分割大文件csv文件(7GB)的文章就介绍到这了,希望我们推荐的答案对大家有所帮助,也希望大家多多支持IT屋!
查看全文