精易论坛

标题: 两个数据对比去重复数据,相同数据不保留<求大神修改加快去重复速度> [打印本页]

作者: 呵呵呵呵呵呵    时间: 2018-9-9 00:30
标题: 两个数据对比去重复数据,相同数据不保留<求大神修改加快去重复速度>
调用了精易模块

希望大神可以加快下去重复的速度,我实在想不到好的法子了,也收集了很多论坛现有的去重复例子,感觉速度都好像不快!




鱼刺类_多线程应用.rar (38.46 KB, 下载次数: 65)

过滤.e (764.27 KB, 下载次数: 150)



作者: IMENOGRK    时间: 2018-9-9 01:47
源码跟模块一起打包会怎样?
作者: 蜗牛人生    时间: 2018-9-9 02:27
http://bbs.eyuyan.com/read.php?tid=405538  了解一下
作者: f100long    时间: 2018-9-9 08:06
努力学习,多线程应用
作者: 汉族    时间: 2018-9-9 10:01
酷狗的手机过滤方式 是 吧整体前面文本集合到一个文本里面 然后用寻找文本来确定是否存在,我说的是大致思路
作者: ltt199    时间: 2018-9-9 11:41
感谢分享。。。。
作者: 凌哥    时间: 2018-9-9 11:47
用K大的哈希表,或者用我模块都行

过滤重复.e (599.26 KB, 下载次数: 59)


作者: 米仓老鼠    时间: 2018-9-9 17:06
谢谢分享,学习了
作者: 1623863129    时间: 2018-9-9 21:13
谢谢分享,学习了
作者: 1623863129    时间: 2018-9-9 21:15
ltt199 发表于 2018-9-9 11:41
**** 作者被禁止或删除 内容自动屏蔽 ****

酷狗的手机过滤方式 是 吧整体前面文本集合到一个文本里面 然后用寻找文本来确定是否存在,我说的是大致思路
作者: 网络注册会员    时间: 2018-9-10 08:38
下来看一下
作者: xuehang00126    时间: 2018-9-12 15:01
下来看一下
作者: 呵呵呵呵呵呵    时间: 2018-9-12 23:01
凌哥 发表于 2018-9-9 11:47
用K大的哈希表,或者用我模块都行

我这个去重复比较特殊  就是第一份文本和第二份文本对比, 只是去除第二份文本中重复的并不与第一份合并

例如第一份文本有数据
1
2
3
第二份文本中有数据
2
3
4

去重复后只保存数据
4
作者: wexiaom    时间: 2019-4-12 17:12
看看效果佮。
作者: myfaint009    时间: 2019-4-17 19:09

感谢分享。。。。
作者: 凌波微步    时间: 2019-4-21 11:40
学习一下去重复!
作者: wei88622    时间: 2019-5-6 02:39
看看啥东西
作者: wei88622    时间: 2019-5-6 02:43
出错            
作者: wei88622    时间: 2019-5-6 02:43
运行不了      
作者: 养乐多ii    时间: 2020-3-28 13:55

作者: y7y7yy    时间: 2020-4-30 19:32
下来看一下
作者: sgwyyjs    时间: 2020-5-16 16:11
666666666666666
作者: ruyan666    时间: 2020-6-9 19:40
原本是被标题吸引进来的 这看到头像,我要说两句屁股一翘,鲍鱼都漏出来了, 你这也太有才了  
作者: 大大张    时间: 2023-5-23 17:29
感谢楼主,正好需要




欢迎光临 精易论坛 (https://125.confly.eu.org/) Powered by Discuz! X3.4