精易论坛

标题: 采集的数据如何去和sqlite已经存在的数据对比？如果存在则不插入超级列表框。 [打印本页]

作者: 我是MT 时间: 2014-4-19 14:29
标题: 采集的数据如何去和sqlite已经存在的数据对比？如果存在则不插入超级列表框。
本帖最后由 caianhua1986 于 2014-4-20 02:39 编辑

sqlite数据库已经存储了网址，每次采集到的新网址要和数据库里面的对比，如果是已经存在的，就不输出到超级列表框，不存在，则输出到列表框。便于处理那些还没有处理过的网址。处理过后，把处理过的网址、以及处理的时间，输出到超级列表框显示出来，然后保存到数据库里面存档。以后要查阅的时候方便从另外一个选项卡的超级列表框中调出。
因为每次采集到的网址比较多，而数据库里面存储的网址也多。所以，每次采集的时候要如何来做对比呢？有熟悉sqlite的吗？
提供些思路，目前我只想到了SQL语句。但并不清楚是啥指令。
数据库自带这种查询语句且有返回值更好。

我自己先试试这句吧。好像论坛里面懂SQL语句的人不多啊。
如果也要需要的可以看看这个：http://www.w3school.com.cn/sql/sql_like.asp

我自己找了下，库里面有个命令，记录集.查找。应该可以。附注：

由于网址较多，所以，单个处理很耗时间。你们说，用多线程来查询可以不？其实也不是太急于这个速度的。只是随着时间增长，数据库里面的网址数量会增多，外面采集到的网址也会增多。
数据库里存储的网址是一定不会减少的。只能减少外面采集到的网址了。基本的大概知道取舍了。
应该没有太大的问题，因为sqlite数据库的处理速度要比一般的数据库都快。特别是越往后面，数据量多的时候，优势明显。sqlite最大能够存储2TB的数据。不怕被挤爆。呵呵。刚查了下，多线程是不行的。看来只能一个一个的去查询对比了。

经典SQL语句大全.zip

10.25 KB, 下载次数: 18

作者: 执着 时间: 2014-4-19 14:29
只能是单个查询了

作者: isbaofu 时间: 2014-4-19 14:58
http://sandbox.runjs.cn/show/xxdsh8sf

作者: isbaofu 时间: 2014-4-19 16:24
我去，我能说我回错帖子了么

欢迎光临精易论坛 (https://125.confly.eu.org/)