两个数据对比去重复数据，相同数据不保留<求大神修改加快去重复速度>

呵呵呵呵呵呵 · 发表于 2018-9-9 00:30:09

调用了精易模块

希望大神可以加快下去重复的速度，我实在想不到好的法子了，也收集了很多论坛现有的去重复例子，感觉速度都好像不快！

鱼刺类_多线程应用.rar (38.46 KB, 下载次数: 65)

过滤.e (764.27 KB, 下载次数: 150)

IMENOGRK · 发表于 2018-9-9 01:47:38

源码跟模块一起打包会怎样？

蜗牛人生 · 发表于 2018-9-9 02:27:55

http://bbs.eyuyan.com/read.php?tid=405538 了解一下

f100long · 发表于 2018-9-9 08:06:34

努力学习，多线程应用

汉族 · 发表于 2018-9-9 10:01:40

酷狗的手机过滤方式是吧整体前面文本集合到一个文本里面然后用寻找文本来确定是否存在，我说的是大致思路

ltt199 · 发表于 2018-9-9 11:41:32

感谢分享。。。。

凌哥 · 发表于 2018-9-9 11:47:25

用K大的哈希表，或者用我模块都行

过滤重复.e (599.26 KB, 下载次数: 59)

米仓老鼠 · 发表于 2018-9-9 17:06:17

谢谢分享，学习了

1623863129 · 发表于 2018-9-9 21:13:58

谢谢分享，学习了

1623863129 · 发表于 2018-9-9 21:15:34

ltt199 发表于 2018-9-9 11:41
**** 作者被禁止或删除内容自动屏蔽 ****

酷狗的手机过滤方式是吧整体前面文本集合到一个文本里面然后用寻找文本来确定是否存在，我说的是大致思路

		自动登录	找回密码
密码			注册

[易源码分享] 两个数据对比去重复数据，相同数据不保留<求大神修改加快去重复速度>