如何在 Python 中拆分大文件 csv 文件（7GB）

Question

我有一个 7GB csv 文件，我想将其拆分成更小的块，以便在笔记本上使用 Python 进行分析时可读且速度更快。我想从中获取一小部分，可能是 250MB，那么我该怎么做呢？

原文由 Sohail 发布，翻译遵循 CC BY-SA 4.0 许可协议

Answer 1

您不需要 Python 来拆分 csv 文件。使用你的外壳：

 $ split -l 100 data.csv

将拆分 data.csv 为 100 行的块。

原文由 Thomas Orozco 发布，翻译遵循 CC BY-SA 3.0 许可协议