【新手】站长大大百度搜索结果我爬不了怎么办？ASP.NET 谁可以发我一份代码

Eric布莱恩 · 发表于 2015-6-23 00:42:59

是不是iIP被屏蔽。上午还可以下午就不行了。  我不太懂。只是想做个小功能。能够实现用户在我网站上输入关键词然后我通过https://www.baidu.com/s?wd=？？？？？？？到百度上爬下结果整理后反馈给用户。就这样。可以实现吗？

还是必须需要好几个IP？我只是开发测试阶段。还是Cookies的问题？

还有一个小问题：
错误 1 “WelSearch.App_Code.HttpItem”并不包含“AutoRedirectCookie”的定义 E:\WelSearch\WelSearch\App_Code\GetUrltoHtml.cs 32 13 WelSearch

HttpItem里面没定义AutoRedirectCookie 吗？
为什么我的报错了？
                                 Allowautoredirect = true,//是否根据３０１跳转    可选项
      报错 →→→→→ AutoRedirectCookie = false,//是否自动处理Cookie    可选项

怎么办呢？

站长苏飞 · 发表于 2015-6-23 09:38:57

这个只有框架里才会有的

Eric布莱恩 · 发表于 2015-6-23 09:51:57

框架里会被屏蔽掉吗？我用苏飞开发助手爬两三次百度搜索结果就会被 404 或 302.

Eric布莱恩 · 发表于 2015-6-23 20:08:58

WebBrowser
关键就在Cookies 不带就会很容易被发现异常搜索
。哈哈已解决！ Bing 和百度都可以秒

Eric布莱恩 · 发表于 2015-6-23 20:09:17

一定要带Cookie访问

		自动登录	找回密码
密码			马上注册

[HttpHelper] 【新手】站长大大百度搜索结果我爬不了怎么办？ASP.NET 谁可以发我一份代码