多线程10分钟爬完精易论坛源码区板块全部帖子3W+数据

查看数: 8606 | 评论数: 17 | 收藏 6

关灯 | 提示：支持键盘翻页 & lt;-左右 ->

帖子模式

学易新

发布时间: 2018-3-18 22:19

正文摘要:

爬取的格式是：帖子分类--帖子URL--帖子名--发帖日期-- 这个正则表达式写了大半天------- 补充内容 (2018-3-25 21:14): 刚刚试了一下这个正则被和谐了！！需要重新写一个正则 ...

love886 浙江省金华市 发表于 2019-4-28 18:18:46

1222222222新技能 GET

wangguan 江苏省南京市 发表于 2018-10-28 19:05:52

学习多线程，谢了！

a474335897 河北省廊坊市 发表于 2018-7-8 16:43:38

你这个貌似没有写线程操作文件的保护机制，不然的话是不会出现文本有空白行的现象

风语者的呢喃广西壮族自治区南宁市 发表于 2018-6-19 14:00:05

学易新发表于 2018-3-19 01:26
刚刚在优化线程，测试一次开766条线程，然后这个电脑ip被禁了，浏览器都打不开论坛了，要是买几万个ip代理 ...

单线程10W个说不定真的凉了。。。

tsg2005 浙江省台州市 发表于 2018-6-9 22:39:45

是PYTHON的，不是E的

tsg2005 湖北省黄冈市 发表于 2018-6-9 22:36:17

学习多线程。

z博士四川省成都市 发表于 2018-6-9 19:06:28

这个厉害了。

红尘旧梦i 河南省郑州市 发表于 2018-6-4 10:57:30

学易新发表于 2018-3-19 01:26
刚刚在优化线程，测试一次开766条线程，然后这个电脑ip被禁了，浏览器都打不开论坛了，要是买几万个ip代理 ...

论坛后台服务器有对应保护机制，不要小看它

Hwak 海南省万宁市 发表于 2018-3-25 11:14:17

居然是个py 还以为是个e

125new 广东省佛山市 发表于 2018-3-25 11:11:02

谢谢分享。

sitemap| 易语言源码| 易语言教程| 易语言论坛| 易语言模块| 手机版| 广告投放| 精易论坛
拒绝任何人以任何形式在本论坛发表与中华人民共和国法律相抵触的言论，本站内容均为会员发表，并不代表精易立场!
论坛帖子内容仅用于技术交流学习和研究的目的，严禁用于非法目的，否则造成一切后果自负！如帖子内容侵害到你的权益，请联系我们！
防范网络诈骗，远离网络犯罪违法和不良信息举报电话0663-3422125，QQ： 793400750，邮箱：[email protected]
网站简介：精易论坛成立于2009年，是一个程序设计学习交流技术论坛，隶属于揭阳市揭东区精易科技有限公司所有。
Powered by Discuz! X3.4 揭阳市揭东区精易科技有限公司 ( 粤ICP备12094385号-1) 粤公网安备 44522102000125　增值电信业务经营许可证粤B2-20192173

		自动登录	找回密码
密码			注册

多线程10分钟爬完精易论坛源码区板块全部帖子3W+数据

正文摘要:

回复