按列拆分大型CSV文件
按列拆分大型CSV文件
提问于 2018-11-28 14:54:16
我有一个非常大(4gb)的csv文件。无法在excel或其他编辑器中打开。行数(行)近3,000行，列数近320,000列。
一种解决方案是将原始文件拆分为较小的文件，并能够在Excel或其他编辑器中打开这些小文件。
第二种解决方案是对原始数据进行转置，然后在Excel中打开它。
我找不到一个转换的工具或脚本。我已经找到了一些脚本和用于拆分的自由软件，但是每个脚本都按行大小划分csv。
是否有方法将原始文件拆分为由最多15000行组成的较小文件。
我试着用：
导入熊猫作为pd pd.read_csv(%文件路径%).T.to_csv(‘%%新文件路径%，headre=false)
但要花很长时间才能完成
回答 1
Stack Overflow用户
发布于 2018-12-04 23:31:15
与此同时，我尝试使用一些python编码，但由于内存问题，它们都失败了。
分隔符(http://www.delimitware.com/)的试用版很好地处理了数据。
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接：
https://stackoverflow.com/questions/53522228
复制相关文章
相似问题
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号