开启辅助访问

精易论坛

 找回密码
 注册

QQ登录

只需一步,快速开始

用微信号发送消息登录论坛

新人指南 邀请好友注册 - 我关注人的新帖 教你赚取精币 - 每日签到


求职/招聘- 论坛接单- 开发者大厅

论坛版规 总版规 - 建议/投诉 - 应聘版主 - 精华帖总集 积分说明 - 禁言标准 - 有奖举报

python爬取网站信息

查看数: 297 | 评论数: 11 | 收藏 0
关灯 | 提示:支持键盘翻页 & lt;-左 右 ->
    组图打开中,请稍候......
发布时间: 2025-4-14 22:30

正文摘要:

网站:https://www.pchi-china.com/page/exhibitor 大佬指导下如何爬取网页上公司的名称、展位号以及查看公司的信息。

回复

jiasuo   浙江省金华市 发表于 2025-4-15 15:52:17
直接js解析获取就行了

屏幕截图 2025-04-15 155142.png (75.81 KB, 下载次数: 0)

屏幕截图 2025-04-15 155142.png

屏幕截图 2025-04-15 155150.png (52.21 KB, 下载次数: 0)

屏幕截图 2025-04-15 155150.png
Jannock   香港特别行政区深水埗区 发表于 2025-4-15 01:12:27
python版本  

pchi-china.zip

1.1 KB, 下载次数: 3

Jannock   香港特别行政区深水埗区 发表于 2025-4-15 00:21:49
Jannock 发表于 2025-4-15 00:21
[e=0].版本 2

.子程序 GET_网页请求, , 公开

一页搞定
Jannock   香港特别行政区深水埗区 发表于 2025-4-15 00:21:31
  
子程序名返回值类型公开备 注
GET_网页请求 
变量名类 型静态数组备 注
Url文本型 
add_Header类_POST数据类 
Header文本型 
Return文本型 
' 请自行调用精易模块!
Url = "https://www.pchi-china.com/cmsApi/common/exhibitorShop/list?pageNum=1&pageSize=99999&countryCode=&exhibitionId=&exhibitorCategory=&isAsc=desc&keyword=&orderByColumn="
add_Header.添加 ("user-agent","Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/135.0.0.0 Safari/537.36")
add_Header.添加 ("version","1")
Header = add_Header.获取协议头数据 (
Return= 网页_访问S (Url,0 , , , ,Header , , 真, , , , , , , , , ,  , )
Return= 编码_utf8到gb2312(Return)



lainian   云南省昆明市 发表于 2025-4-14 23:40:56
jmao1234 发表于 2025-4-14 22:56
这只是一页的,我要把几十页的全爬出来

请求哪里不是加了页数,1就是第一1页,2就是第二页。直接循环提交,
fire9   江西省南昌市 发表于 2025-4-14 23:29:23
获取数据,解析数据,保存数据
kaliJs   河南省信阳市 发表于 2025-4-14 23:07:00
修改负载里面的pageNum参数即可
右手胜过左手   贵州省遵义市 发表于 2025-4-14 22:59:43
jmao1234 发表于 2025-4-14 22:56
这只是一页的,我要把几十页的全爬出来

你采集那么多它也是翻页啊;你这问题有点奇怪,你是不会翻页?还是不会写代码?还是有加密参数?采集多了有验证?问题的基本提问法都没描述
jmao1234   浙江省杭州市 发表于 2025-4-14 22:56:02
右手胜过左手 发表于 2025-4-14 22:48
你这不是自己都找到了吗?

这只是一页的,我要把几十页的全爬出来
右手胜过左手   贵州省遵义市 发表于 2025-4-14 22:48:16
你这不是自己都找到了吗?
发布主题 收藏帖子 返回列表

sitemap| 易语言源码| 易语言教程| 易语言论坛| 易语言模块| 手机版| 广告投放| 精易论坛
拒绝任何人以任何形式在本论坛发表与中华人民共和国法律相抵触的言论,本站内容均为会员发表,并不代表精易立场!
论坛帖子内容仅用于技术交流学习和研究的目的,严禁用于非法目的,否则造成一切后果自负!如帖子内容侵害到你的权益,请联系我们!
防范网络诈骗,远离网络犯罪 违法和不良信息举报电话0663-3422125,QQ: 793400750,邮箱:[email protected]
网站简介:精易论坛成立于2009年,是一个程序设计学习交流技术论坛,隶属于揭阳市揭东区精易科技有限公司所有。
Powered by Discuz! X3.4 揭阳市揭东区精易科技有限公司 ( 粤ICP备12094385号-1) 粤公网安备 44522102000125 增值电信业务经营许可证 粤B2-20192173

快速回复 返回顶部 返回列表