精易论坛

标题: 文本存储问题 [打印本页]

作者: Huaz 时间: 2025-4-22 03:36
标题: 文本存储问题
有什么方案可以文本文件导入百万行文本临时存储到某处并提取呢？

作者: aipca 时间: 2025-4-22 08:29
这么大…… 写到本地

作者: 艾孟凡 时间: 2025-4-22 08:54

写到sqlite数据库

作者: ly445414237 时间: 2025-4-22 10:49
这个数据库最方便吧

作者: 执法官黑老大 时间: 2025-4-22 10:53
我前几天刚操作了一个498G的Json文档，解析后输出了14亿6千8百多万行数据，我不知道你所说的临时存储到某处并提取具体是什么意思，大文本文件都是分段读入分段写出，我那个取了个巧，最后输出的文本可以实现几十G的数字文本秒查询。

作者: Ruang 时间: 2025-4-22 12:03
分割成几段TXT文本进行读取

作者: Huaz 时间: 前天 16:14

执法官黑老大发表于 2025-4-22 10:53
我前几天刚操作了一个498G的Json文档，解析后输出了14亿6千8百多万行数据，我不知道你所说的临时存储到某处 ...

就是将文本内容存到变量里然后行号提取

欢迎光临精易论坛 (https://125.confly.eu.org/)