苏飞论坛

 找回密码
 马上注册

QQ登录

只需一步,快速开始

分布式系统框架(V2.0) 轻松承载百亿数据,千万流量!讨论专区 - 源码下载 - 官方教程

HttpHelper爬虫框架(V2.7-含.netcore) HttpHelper官方出品,爬虫框架讨论区 - 源码下载 - 在线测试和代码生成

HttpHelper爬虫类(V2.0) 开源的爬虫类,支持多种模式和属性 源码 - 代码生成器 - 讨论区 - 教程- 例子

查看: 5868|回复: 3

[求助] 能用这个抓取阿里数据嘛?

[复制链接]
发表于 2013-6-21 09:56:19 | 显示全部楼层 |阅读模式
阿里对于频繁大量访问做了很多限制,访问一下就会出现验证码,我现在采用的是System.Windows.Forms.WebBrowser这个控件去访问,出现验证码采用人工输入的方式,但验证码输入的实在是有点受不了。把DNS改成谷歌的 8.8.8.8 ,验证码是没有了,但访问一段时间之后这个DNS就访问不了,需要等待一段时间才能修复~有没有好办法能解决这个抓取数据的问题?无限感激~



1. 开通SVIP会员,免费下载本站所有源码,不限次数据,不限时间
2. 加官方QQ群,加官方微信群获取更多资源和帮助
3. 找站长苏飞做网站、商城、CRM、小程序、App、爬虫相关、项目外包等点这里
发表于 2013-6-21 09:59:25 | 显示全部楼层
可以收集一些代码使用代理试试,访问几次换一个代理 IP
 楼主| 发表于 2013-6-21 10:19:25 | 显示全部楼层
我用你 HttpHelper这个类访问,与用浏览器真实访问返回的结果貌似不一样~
发表于 2013-6-21 10:47:36 | 显示全部楼层
潇洒☆人生 发表于 2013-6-21 10:19
我用你 HttpHelper这个类访问,与用浏览器真实访问返回的结果貌似不一样~

浏览器和我的Httphelper类访问不一样是因为你没有执行JS吧。正常情况下是肯定不会一样的。
您需要登录后才可以回帖 登录 | 马上注册

本版积分规则

QQ|手机版|小黑屋|手机版|联系我们|关于我们|广告合作|苏飞论坛 ( 豫ICP备18043678号-2)

GMT+8, 2024-12-23 19:40

© 2014-2021

快速回复 返回顶部 返回列表