精易论坛

标题: 大文本xx超级去重复并且打乱顺序软件开源 [打印本页]

作者: 121132310 时间: 2020-2-27 14:52
标题: 大文本xx超级去重复并且打乱顺序软件开源
本帖最后由 121132310 于 2020-2-27 15:02 编辑

之前有客户需要定制这个软件，我想着用最快的速度处理1G的文本(目前本软件10M文本2秒可处理完毕，特大文本还没有测试)，几分钟后客户在别家买了，我做好拿来开源得了！象征性的骗点精币！程序使用了E2EE支持库，你们自己下载，如果有的话不用下载。回复帖子是功德！

去重复打乱顺序.rar (6.43 KB, 下载次数: 623)

e2ee.rar (2.67 MB, 下载次数: 451)

补充内容 (2020-12-28 23:39):
补充说明：软件处理文件的大小，根据自身电脑内存的大小，文件是通过内存处理的，内存有多大就能处理多大！

作者: chaozi1204 时间: 2020-2-27 15:10

不错，不错！

作者: 骑士学长 时间: 2020-2-27 16:15
来看看，虽然用不到，顶一下

作者: mood100 时间: 2020-2-27 16:34
处理速度还是很快哦

作者: 漫步者j 时间: 2020-2-27 21:45
66666666666666

作者: ppswang 时间: 2020-2-28 00:50

用不上，帮忙顶一下。。。。

作者: 843411485 时间: 2020-2-28 00:53
支持一下！

作者: 杨明煜 时间: 2020-2-28 08:39
感谢分享，有你同行.................

作者: q371401207 时间: 2020-2-28 12:01

作者: wjswzj0 时间: 2020-2-28 12:56
谢谢楼主分享

作者: ck66 时间: 2020-2-28 13:39
谢谢楼主分享

作者: 逃离梦境 时间: 2020-2-28 17:50
来看看，虽然用不到，顶一下

作者: wangguan 时间: 2020-2-28 18:13
感谢分享！快吗？试试。

作者: 244313019 时间: 2020-2-29 14:40
为什么我下载下来不是exe的程序呢

作者: FUYUEPC 时间: 2020-3-1 09:09

244313019 发表于 2020-2-29 14:40
为什么我下载下来不是exe的程序呢

那就是E，E就是源码自己编码一下

作者: 蔡少HK 时间: 2020-3-1 20:12
学习一下看看是什么东西

作者: 遍体鳞伤不够美 时间: 2020-3-1 22:50
谢谢楼主分享

作者: orjg 时间: 2020-3-2 12:59
谢谢楼主分享

作者: xg664756 时间: 2020-3-6 11:23
不错学习了

作者: 水晶心恋 时间: 2020-3-6 19:32
就是不知道g级文件去重复能力以及打乱顺序后面的能打乱不

作者: 121132310 时间: 2020-3-7 21:25

水晶心恋发表于 2020-3-6 19:32
就是不知道g级文件去重复能力以及打乱顺序后面的能打乱不

应该没问题，但也考虑电脑性能。

作者: OrdnAry 时间: 2020-3-8 01:04
感谢分享，正好需要

作者: gaoqing 时间: 2020-4-14 20:05
谢谢分享Q！

作者: gaoqing 时间: 2020-4-14 20:05
正好需要啊

作者: 小柠檬1 时间: 2020-4-14 20:28
感谢分享感谢分享感谢分享

作者: cszlovelxl 时间: 2020-6-8 09:23
谢谢楼主分享

作者: 淘A货 时间: 2020-9-24 21:43
1啪啪啪啪啪啪铺铺铺铺铺铺铺铺铺铺铺铺铺铺

作者: 小伟爱吃醋 时间: 2020-9-25 17:43
哦哦婆婆【哦【o

作者: 960055311 时间: 2020-10-10 12:22
卧槽，真牛逼啊！！！刚好需要

作者: 孤峰 时间: 2020-10-20 21:11
看起来很牛逼的样子，，看看先，感谢

作者: 孤峰 时间: 2020-10-20 22:10
啊我打了28个字，这一切都是为了那么几个精币，真的，挺辛苦的了。

作者: 孤峰 时间: 2020-10-20 22:12
回复一下先，感觉是不错的样子

作者: 喵帕斯和艾希 时间: 2020-10-20 22:15
感谢楼主的分享

作者: gdj528 时间: 2020-10-23 21:34
大文本xx超级去重复并且打乱顺序软件开源

作者: wxc6688 时间: 2020-11-4 08:22

作者: wxc6688 时间: 2020-11-20 12:23

作者: ankalau 时间: 2020-11-26 16:47
我现在有个单子就是，13M的文本，去重复需要80多秒，很尴尬。

作者: 小羊要吃狼 时间: 2020-12-28 15:04
我都是做几十G起步的大文本处理的，你这个10M的大文本有点太

作者: welisis 时间: 2021-1-10 15:28
谢谢谢谢

作者: 蜗牛人生 时间: 2021-3-29 20:25
这个东西是我开源的..二次修改..开源记得标明出处..谢谢

作者: zifeiyu 时间: 2021-4-13 14:34
...................................................

作者: 夜曦丫 时间: 2021-8-10 16:22
aDDSADASDASDA DS ASD AS

作者: 1reqfagag 时间: 2021-9-24 23:06
为什么需要e2ee模块？？？？？？？

作者: chq01 时间: 2021-9-28 15:19
下了，不会用。哈哈

作者: 一曲离歌 时间: 2021-10-6 15:18
几十G起步的大文本处理的

作者: 雨凡 时间: 2022-5-25 21:23
111111111111

作者: 华师大 时间: 2023-4-2 08:22

支持开源~感谢分享！很给力

作者: 603007856 时间: 2023-5-17 15:17
666666666666

作者: 603007856 时间: 2023-5-23 23:16
66666666666666666666666

作者: lm88818 时间: 2023-11-25 11:27
感谢分享，很给力！~

作者: 互联网 时间: 2024-4-23 10:45
i5处理器，16G内存，70MB的文件，半个小时了，还在那里处理中，进度条才走一点，我不知道这算什么大文件处理

作者: 然而 时间: 2024-7-3 22:44
6666666666666666666

作者: guansidong 时间: 2024-8-27 06:55
感谢分享，很给力！~

欢迎光临精易论坛 (https://125.confly.eu.org/)