苏飞论坛

 找回密码
 马上注册

QQ登录

只需一步,快速开始

分布式系统框架(V2.0) 轻松承载百亿数据,千万流量!讨论专区 - 源码下载 - 官方教程

HttpHelper爬虫框架(V2.7-含.netcore) HttpHelper官方出品,爬虫框架讨论区 - 源码下载 - 在线测试和代码生成

HttpHelper爬虫类(V2.0) 开源的爬虫类,支持多种模式和属性 源码 - 代码生成器 - 讨论区 - 教程- 例子

查看: 5152|回复: 3

[咨询站长] HttpHelper获取Cookie和抓包工具获取COOKIE参数个数不一致

[复制链接]
发表于 2018-3-26 09:59:00 | 显示全部楼层 |阅读模式
我用HttpHelper模拟登陆,也能登陆成功,但是获取下一个页面时就不成功了,检查了一下Cookie发现,抓包工具返回的Cookie参数会比HttpHelper的多了两三个参数,具体核对了一下,发现是多了,_ga=GA1.2.1132488489.1521876011; _gid=GA1.2.1675746214.1522026915; Hm_lvt_b366fbb5465f5a86e1cc2871552e1fdb=1521876044,1522026896;Hm_lpvt_b366fbb5465f5a86e1cc2871552e1fdb=1522027255;我大概在网站搜索了一下,觉得这些参数应该是百度和谷歌的Cookie,现在HttpHelper获取不到这样的参数,那么该如何处理呢?


1. 开通SVIP会员,免费下载本站所有源码,不限次数据,不限时间
2. 加官方QQ群,加官方微信群获取更多资源和帮助
3. 找站长苏飞做网站、商城、CRM、小程序、App、爬虫相关、项目外包等点这里
发表于 2018-3-26 11:06:12 | 显示全部楼层
这些应该不会影响的吧,这只是统计代码的Cookie,应该不是这里的原因,这些Cookie都是JS产生的,不是服务端返回的,Httphelper是获取不到的。需要执行JS才会产生,你检查一下别的方向,应该不会是因为这些cookie的原因。

Cookie格式,或者是其他参数影响的
 楼主| 发表于 2018-3-26 13:18:59 | 显示全部楼层
那像这种情况,要不要加上统计产生的COOKIE还是说直接把这部分COOKIE忽略掉?
发表于 2018-3-26 17:22:22 | 显示全部楼层
99%的情况都是忽略掉就行了。
您需要登录后才可以回帖 登录 | 马上注册

本版积分规则

QQ|手机版|小黑屋|手机版|联系我们|关于我们|广告合作|苏飞论坛 ( 豫ICP备18043678号-2)

GMT+8, 2024-12-26 15:23

© 2014-2021

快速回复 返回顶部 返回列表