精易论坛

标题: 大文本处理工具 [打印本页]

作者: 吃一口 时间: 2020-12-22 09:47
标题: 大文本处理工具
有一个几十G的txt文件
共有数据上亿行
有什么办法，打开，或者是分割成多份后操作。
有没有软件呀

作者: 吃一口 时间: 2020-12-22 09:56
求一份工具谢谢

作者: b0y 时间: 2020-12-22 11:00
这种还是用mysql导入 cha询吧.速度快

作者: xinhao1 时间: 2020-12-22 12:13

b0y 发表于 2020-12-22 11:00
这种还是用mysql导入 cha询吧.速度快

几十g的文本MySQL也不行，要用大型数据库

作者: 无风不起浪 时间: 2020-12-22 12:40
这么大的用golang搞易语言肯定不行你可以付费定制网上的超过百万行基本就嗝屁了

作者: 南城BeiNuan 时间: 2020-12-22 18:33
逐行到数据库，开启线程，几十秒。我之前也是几个G的大小

作者: hmyroot 时间: 2020-12-23 21:48
我之前用过一个调用系统dll读入文件到内存的模块，几十GB的邮件都可以读取，主要是用来同步outlook数据用的(读写字节集)，不知道能否处理文本文件。

作者: 吃一口 时间: 2020-12-29 17:59

作者: 小牛咪咪 时间: 2021-5-17 23:34

作者: 961449367 时间: 2021-6-3 15:37
111111111111111111111111

作者: 331550765 时间: 2021-7-13 18:55
6666666666666666666666666666

作者: ericz 时间: 2022-3-18 20:44
同求同求

作者: ericz 时间: 2022-3-18 20:45
同求大文本处理 G级的

欢迎光临精易论坛 (https://125.confly.eu.org/)