zoukankan      html  css  js  c++  java
  • Snapde一个全新的CSV超大文件编辑软件

    今天介绍如果数据量超过104万行Excel无法打开了,用什么软件可以打开呢?Snapde,一个专门为编辑超大型数据量CSV文件而设计的单机版电子表格软件;它在C++语言开发的Snapman多人协作电子表格内核基础上进行了重新设计,换用C语言重新开发内核,比Snapman的电子表格核心有了质的提升,支持编辑数据从原来的的15兆CSV提升到了2.5G,原来编辑5万行就会很卡的,现在编辑一两千万行都不会卡。Snapde安装包15.4m(主要python语言的文件占用空间),主程序非常轻巧启动超快;下面来一些大文件CSV测试其性能(1个三百多兆,1个一个G,1个3.53G):

    1、deputies_dataset.csv文件,文件大小325.98m,3014903行10列(30149030个单元格)

    打开截图:

     打开时间花费:20秒

     内存占用497.8M:

    2、ft_train.csv文件,文件大小1.05G,307512行903列(277683336个单元格)

     打开截图:

     

     打开时间花费:1分30秒

     内存占用2.8G:

     

    3、yelp_review.csv文件,文件大小3.53G,5261669行10列(52616690个单元格)

     

     打开截图:

     打开时间花费:2分14秒

     内存占用4.09G:

     CSV文件是一种文本文件,我们使用世界上最厉害的文本编辑器之一:64位的notepade++对1G的ft_train.csv进行打开编辑,发现居然无法打开:

    无论从轻巧、流畅上看,还是从上面对于大型CSV文件操作看,snapde都是一个很优秀的编辑器。

    Snapde的下载网址:http://www.snapman.xyz

    Snapde功能介绍页面:http://www.snapman.xyz/Snapde/help.php

  • 相关阅读:
    矩阵求逆的几种方法总结(C++)
    c++ 继承类强制转换时的虚函数表工作原理
    博客开通(附本博客样式)
    Python-SocketServer模块
    Python-UDP编程
    Python-TCP编程
    Python-logging模块
    Python-多线程+多进程包(concurrent包,处理并发)
    07数组与接口
    java作业 06
  • 原文地址:https://www.cnblogs.com/virtualNatural/p/9498418.html
Copyright © 2011-2022 走看看