http://www.sufeinet.com/plugin.php?id=keke_group

苏飞论坛

 找回密码
 马上注册

QQ登录

只需一步,快速开始

分布式系统框架(V2.0) 轻松承载百亿数据,千万流量!讨论专区 - 源码下载 - 官方教程

HttpHelper爬虫框架(V2.7-含.netcore) HttpHelper官方出品,爬虫框架讨论区 - 源码下载 - 在线测试和代码生成

HttpHelper爬虫类(V2.0) 开源的爬虫类,支持多种模式和属性 源码 - 代码生成器 - 讨论区 - 教程- 例子

查看: 6183|回复: 3

[求助] 有两个问题想请假,关于connection和和header的顺序

[复制链接]
发表于 2017-1-30 23:05:22 来自移动端 | 显示全部楼层 |阅读模式
请教大神们,用httphelper有没有办法控制header的顺序,就像这里提到的情况http://cnodejs.org/topic/5060722e01d0b80148172f55,httphelper是否能做到?
再有就是关于connection的,默认都是keepalive,但是我在实际抓包时,edge和chrome的connection的值稍有不同,一个是keep-alive,一个是Keep-Alive,大小写不一样,httphelper是否可以改变这个?


1. 开通SVIP会员,免费下载本站所有源码,不限次数据,不限时间
2. 加官方QQ群,加官方微信群获取更多资源和帮助
3. 找站长苏飞做网站、商城、CRM、小程序、App、爬虫相关、项目外包等点这里
发表于 2017-2-3 09:09:11 | 显示全部楼层
connection 大小写不一样,并不会影响
header的顺序就是根据你添加的顺序来的,我并没有干涉他的发送顺序
 楼主| 发表于 2017-2-3 23:49:08 | 显示全部楼层
本帖最后由 欧阳天佐 于 2017-2-3 23:51 编辑
站长苏飞 发表于 2017-2-3 09:09
connection 大小写不一样,并不会影响
header的顺序就是根据你添加的顺序来的,我并没有干涉他的发送顺序

谢谢飞哥回答,但我还是有些疑问。connection确实影响不大,但是我还是想知道大小写能不能进行修改,因为ie下是大写,chrome下是小写,如果用chrome的作为爬虫的ua,我担心有的网站反爬虫会根据这一点区分是否是非正常的浏览。
再有就是关于header的,确实如你所说,header的顺序就是根据你添加的顺序来的,但是仅针对自己添加的header,也就是用item.Header.Add方法添加的header顺序可变。但是对于类中自带的header(cookie、origin、User-Agent、accept等),我试了试下面两种写法
            HttpItem item = new HttpItem()
            {
                Accept = "*/*",
                URL = url,//URL     必需项   
            }            

            HttpItem item = new HttpItem()
           {
                URL = url,//URL     必需项                                    Accept = "*/*",
            }

上面的两种写法运行时用fiddler抓包时,在Raw中看,顺序并没有改变,还请飞哥指导一下哈~

发表于 2017-2-4 08:13:42 | 显示全部楼层
参数类的顺序并不会影响我类里面的顺序的。如果你要将所有的Header都设置顺序这个Htttphelper还不支持。可自行修改实现

connection这个大写小写你可以自己转化,我在发送时并没有做转化,会根据输入的参数定
您需要登录后才可以回帖 登录 | 马上注册

本版积分规则

QQ|手机版|小黑屋|手机版|联系我们|关于我们|广告合作|苏飞论坛 ( 豫ICP备18043678号-2)

GMT+8, 2024-11-22 07:08

© 2014-2021

快速回复 返回顶部 返回列表