http://www.sufeinet.com/plugin.php?id=keke_group

苏飞论坛

 找回密码
 马上注册

QQ登录

只需一步,快速开始

分布式系统框架(V2.0) 轻松承载百亿数据,千万流量!讨论专区 - 源码下载 - 官方教程

HttpHelper爬虫框架(V2.7-含.netcore) HttpHelper官方出品,爬虫框架讨论区 - 源码下载 - 在线测试和代码生成

HttpHelper爬虫类(V2.0) 开源的爬虫类,支持多种模式和属性 源码 - 代码生成器 - 讨论区 - 教程- 例子

查看: 4178|回复: 3

[反馈建议] 快捷的指定协议头

[复制链接]
发表于 2014-1-18 20:43:25 | 显示全部楼层 |阅读模式
比方说这样的一个请求
GET /cdn_minisite.js HTTP/1.1
Host: jqmt.qq.com
Connection: keep-alive
Accept: */*
User-Agent: Mozilla/5.0 (Windows NT 6.1) AppleWebKit/535.19 (KHTML, like Gecko) Chrome/18.0.1025.166 Safari/535.19 QQ/26295
Referer: http://minisite2012.qq.com/mini_site_index.htm?time=true
Accept-Encoding: gzip,deflate
Accept-Language: zh-CN
Accept-Charset: *,utf-8


只是打个比方     如果我抓包 抓到这样的包 能否 放到sufei的软件里 直接生成相应代码 只含我的这些协议头 或者 httphelper类就提供这样的一个功能?
有的网站  你少 了个协议头 ,多了个协议头 就错 了    不管怎么说   用抓到能用的包 直接模拟出去 也是这些协议头 总归是好的



1. 开通SVIP会员,免费下载本站所有源码,不限次数据,不限时间
2. 加官方QQ群,加官方微信群获取更多资源和帮助
3. 找站长苏飞做网站、商城、CRM、小程序、App、爬虫相关、项目外包等点这里
发表于 2014-1-18 20:52:38 | 显示全部楼层
这个有参数设置,不过生成器里没加,我下次更新加上吧
 楼主| 发表于 2014-1-19 19:31:09 | 显示全部楼层
站长苏飞 发表于 2014-1-18 20:52
这个有参数设置,不过生成器里没加,我下次更新加上吧

            HttpItem item = new HttpItem()
            {

                Method = "get",//URL     可选项 默认为Get
                Encoding = Encoding.UTF8,
                Cookie = cookie,
                CookieCollection = cc,

                ResultType = Dzh.ResultType.Byte,
                ICredentials = CredentialCache.DefaultCredentials,
                ResultCookieType = ResultCookieType.CookieCollection,
            };


这样的情况下  cc 如果是  空的 发出去 就不带cookie  了  
其实我是       手动抓包一边这样cookie 就字符串形式了   返回来的用CookieCollection话 他cookie能自动处理  或者有没  字符串cookie跟CookieCollection互相转换的方法呢
发表于 2014-1-20 08:07:20 | 显示全部楼层
您需要登录后才可以回帖 登录 | 马上注册

本版积分规则

QQ|手机版|小黑屋|手机版|联系我们|关于我们|广告合作|苏飞论坛 ( 豫ICP备18043678号-2)

GMT+8, 2024-12-23 10:22

© 2014-2021

快速回复 返回顶部 返回列表