如何在Python中分割大文件csv文件(7GB) [英] How can I split a large file csv file (7GB) in Python

查看:1415
本文介绍了如何在Python中分割大文件csv文件(7GB)的处理方法,对大家解决问题具有一定的参考价值,需要的朋友们下面随着小编来一起学习吧!

问题描述

我有一个7GB的 csv 文件,我想分成更小的块,所以它是可读,更快的分析在笔记本上的Python。

I have a 7GB csv file which I'd like to split into smaller chunks, so it is readable and faster for analysis in Python on a notebook. I would like to grab a small set from it, maybe 250MB, so how can I do this?

推荐答案

你不需要这么做需要Python来拆分csv文件。使用您的shell:

You don't need Python to split a csv file. Using your shell:

$ split -l 100 data.csv

将分割100行的 data.csv

这篇关于如何在Python中分割大文件csv文件(7GB)的文章就介绍到这了,希望我们推荐的答案对大家有所帮助,也希望大家多多支持IT屋!

查看全文
登录 关闭
扫码关注1秒登录
发送“验证码”获取 | 15天全站免登陆