苏飞论坛

 找回密码
 马上注册

QQ登录

只需一步,快速开始

分布式系统框架(V2.0) 轻松承载百亿数据,千万流量!讨论专区 - 源码下载 - 官方教程

HttpHelper爬虫框架(V2.3-含.netcore) HttpHelper官方出品,爬虫框架讨论区 - 源码下载 - 在线测试和代码生成

HttpHelper爬虫类(V2.0) 开源的爬虫类,支持多种模式和属性 源码 - 代码生成器 - 讨论区 - 教程- 例子

查看: 94|回复: 3

[HttpHelper] 58国际站分页获取

[复制链接]
发表于 3 天前 | 显示全部楼层 |阅读模式
想获取58国际站上面的信息,但是点击分页的时候,发现它站点的地址全是一个样的https://g.58.com/j-gllosangeles/glchushou/pn3/?PGTID=0d00ecdc-050a-3888-6548-23e7f9fe6c88&ClickID=1无论你在分页点击哪一个,地址显示都是同一个地址,而且分页的地址也是一样,这个怎么解决

找站长苏飞做网站、商城、CRM、小程序、App、爬虫相关、项目外包等点这里
发表于 3 天前 | 显示全部楼层
通过COOKIe修改的吧,或者其他参数,不一定非得是用这个URL,
找站长苏飞做网站、商城、CRM、小程序、App、爬虫相关、项目外包等点这里
回复 支持 1 反对 0

使用道具 举报

发表于 前天 11:55 | 显示全部楼层
找站长苏飞做网站、商城、CRM、小程序、App、爬虫相关、项目外包等点这里
发表于 前天 14:08 | 显示全部楼层
好小子 发表于 2021-2-23 11:55
地址是不一样的   url中的pn3就是分页参数


pn3  这个确实是,可能是看代码多了,眼花了
找站长苏飞做网站、商城、CRM、小程序、App、爬虫相关、项目外包等点这里
您需要登录后才可以回帖 登录 | 马上注册

本版积分规则

QQ|手机版|小黑屋|手机版|联系我们|关于我们|广告合作|苏飞论坛 ( 豫ICP备17001017号-1)

GMT+8, 2021-2-25 06:52

© 2014-2021

快速回复 返回顶部 返回列表