http://www.sufeinet.com/plugin.php?id=keke_group

苏飞论坛

 找回密码
 马上注册

QQ登录

只需一步,快速开始

分布式系统框架(V2.0) 轻松承载百亿数据,千万流量!讨论专区 - 源码下载 - 官方教程

HttpHelper爬虫框架(V2.7-含.netcore) HttpHelper官方出品,爬虫框架讨论区 - 源码下载 - 在线测试和代码生成

HttpHelper爬虫类(V2.0) 开源的爬虫类,支持多种模式和属性 源码 - 代码生成器 - 讨论区 - 教程- 例子

查看: 6186|回复: 6

[咨询站长] 怎么淘宝店铺产品采集列表?

[复制链接]
发表于 2016-1-14 10:40:35 | 显示全部楼层 |阅读模式


2016年,淘宝更新,让我以前的采集店铺产品列表 现在不能采集了!现在代码如下:

      string url = "https://shop124210497.taobao.com/search.htm";
            HttpWebRequest myRequest = (HttpWebRequest)WebRequest.Create(url);
            myRequest.Method = "GET";
            myRequest.KeepAlive = false;

            myRequest.Timeout = 5000;
            myRequest.Proxy = null;
            myRequest.UserAgent = "Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 6.1; WOW64; Trident/4.0; SLCC2; .NET CLR 2.0.50727; .NET CLR 3.5.30729; .NET CLR 3.0.30729; Media Center PC 6.0; .NET4.0C; .NET4.0E)";
            myRequest.Headers.Add("Accept-Language", "zh-CN");
            myRequest.Accept = "application/x-ms-application, image/jpeg, application/xaml+xml, image/gif, image/pjpeg, application/x-ms-xbap, application/vnd.ms-excel, application/vnd.ms-powerpoint, application/msword, */*";
            myRequest.ProtocolVersion = HttpVersion.Version11;
            ServicePointManager.SecurityProtocol = SecurityProtocolType.Ssl3;
            HttpWebResponse myResponse = (HttpWebResponse)myRequest.GetResponse();
            string code = new System.IO.StreamReader(myResponse.GetResponseStream(), Encoding.GetEncoding("utf-8")).ReadToEnd();



总是提示:   阿里巴巴 - 低版本浏览器升级提醒   







1. 开通SVIP会员,免费下载本站所有源码,不限次数据,不限时间
2. 加官方QQ群,加官方微信群获取更多资源和帮助
3. 找站长苏飞做网站、商城、CRM、小程序、App、爬虫相关、项目外包等点这里
发表于 2016-1-14 12:45:05 | 显示全部楼层
发表于 2016-1-14 12:45:19 | 显示全部楼层
UserAgent内的浏览器换一下就行了
发表于 2016-1-14 16:32:34 | 显示全部楼层
站长苏飞 发表于 2016-1-14 12:45
UserAgent内的浏览器换一下就行了

你说得方法是铁定不行的,淘宝的这个提示是由于他这条导致的
ServicePointManager.SecurityProtocol = SecurityProtocolType.Ssl3;
这个设计 如果不加上这条很多电脑要提示 基础连接已经关闭,加了这条淘宝让升级!!
所以 最好的解决方式 就是用.net4.5 并且使用tls1.2
发表于 2016-1-14 16:44:09 | 显示全部楼层
iuiuiu1818 发表于 2016-1-14 16:32
你说得方法是铁定不行的,淘宝的这个提示是由于他这条导致的
ServicePointManager.SecurityProtocol = S ...

我上面链接上面的访问结果在那里放着呢。行不行不是你说了算,也不是我说了算,程序执行结果说了算吧。
 楼主| 发表于 2016-1-15 10:24:24 | 显示全部楼层
必须需要4.0 或者以上  ,我用2.0 实现不了
发表于 2016-1-25 21:32:47 | 显示全部楼层
这里有.net 2.0的解决办法
http://blog.csdn.net/atceedsun/article/details/50443657

这个BouncyCastle.Crypto我看不太懂,里面的例子需要等待60s,如果楼主研究透了,希望顺便告诉我怎么用
您需要登录后才可以回帖 登录 | 马上注册

本版积分规则

QQ|手机版|小黑屋|手机版|联系我们|关于我们|广告合作|苏飞论坛 ( 豫ICP备18043678号-2)

GMT+8, 2024-11-23 18:58

© 2014-2021

快速回复 返回顶部 返回列表