精易论坛

标题: 抓取T_mall被提示"需要登陆"如何解决的呢 [打印本页]

作者: 我是MT 时间: 2015-2-5 04:10
标题: 抓取T_mall被提示"需要登陆"如何解决的呢
本帖最后由我是MT 于 2015-2-5 04:26 编辑

天-猫的搜索链接是这样子的: url = "http://list.tmall.com/search_product.htm?q=" + keyword;
前面的链接 + 搜索关键词。
翻页的时候60个宝贝一页。60， 120， 180 。。。。  i++ ,
for（ i=1，i<100，i++）i=i*60
翻页的时url = url + "&s=" + page
计次循环(int i = 1; i < pageNum ; i++)
      {
         string page = Convert.ToString(i * 60);
         url = url + "&s=" + page;

   }
请问有人知道如何解决吗？
反爬虫机制真的是牛的一逼啊：

这个什么要封锁到什么时候呢。

补充内容 (2015-2-6 08:43):
看样子这群人都是看看而已，打酱油的怎么这么多啊。

欢迎光临精易论坛 (https://125.confly.eu.org/)