http://www.sufeinet.com/plugin.php?id=keke_group

苏飞论坛

 找回密码
 马上注册

QQ登录

只需一步,快速开始

分布式系统框架(V2.0) 轻松承载百亿数据,千万流量!讨论专区 - 源码下载 - 官方教程

HttpHelper爬虫框架(V2.7-含.netcore) HttpHelper官方出品,爬虫框架讨论区 - 源码下载 - 在线测试和代码生成

HttpHelper爬虫类(V2.0) 开源的爬虫类,支持多种模式和属性 源码 - 代码生成器 - 讨论区 - 教程- 例子

查看: 12408|回复: 7

[咨询站长] 求教,反爬虫如何解决?

[复制链接]
发表于 2015-6-3 16:54:38 | 显示全部楼层 |阅读模式
1金钱
大家好!
我在多线程请求一个服务器的不同页面时,返回了server too busy的页面,应该是被反爬虫了吧,我不懂这方面的知识,请大家赐教?
用代理可以解决这个问题吗?

最佳答案

查看完整内容

那这不是反爬虫,这是被系统封禁了。估计得换IP


1. 开通SVIP会员,免费下载本站所有源码,不限次数据,不限时间
2. 加官方QQ群,加官方微信群获取更多资源和帮助
3. 找站长苏飞做网站、商城、CRM、小程序、App、爬虫相关、项目外包等点这里
发表于 2015-6-3 16:54:39 | 显示全部楼层
ghoulw 发表于 2015-6-3 23:16
当程序返回错误的时候,手动也不能访问。

那这不是反爬虫,这是被系统封禁了。估计得换IP
回复

使用道具 举报

发表于 2015-6-3 18:06:33 | 显示全部楼层
这个不一定,是因为这个原因,在这种情况下你手动访问看看能不能访问,先确认一样是不是因为这个原因
回复

使用道具 举报

 楼主| 发表于 2015-6-3 23:16:27 | 显示全部楼层
站长苏飞 发表于 2015-6-3 18:06
这个不一定,是因为这个原因,在这种情况下你手动访问看看能不能访问,先确认一样是不是因为这个原因

当程序返回错误的时候,手动也不能访问。
回复

使用道具 举报

 楼主| 发表于 2015-6-4 08:42:04 | 显示全部楼层
站长苏飞 发表于 2015-6-4 08:02
那这不是反爬虫,这是被系统封禁了。估计得换IP

谢谢飞哥,那我买一些代理应该就可以了。
回复

使用道具 举报

发表于 2015-6-4 09:37:23 | 显示全部楼层
ghoulw 发表于 2015-6-4 08:42
谢谢飞哥,那我买一些代理应该就可以了。

这个我建议你先找一些免费的测试一下,不一定是因为这个原因
回复

使用道具 举报

 楼主| 发表于 2015-6-4 23:12:43 | 显示全部楼层
站长苏飞 发表于 2015-6-4 09:37
这个我建议你先找一些免费的测试一下,不一定是因为这个原因

我自动获取了30个代理,这下可以了,只是免费的代理不太稳定有些有返回,有些没有。
回复

使用道具 举报

发表于 2015-6-5 08:17:58 | 显示全部楼层
ghoulw 发表于 2015-6-4 23:12
我自动获取了30个代理,这下可以了,只是免费的代理不太稳定有些有返回,有些没有。

那挺好,说明是限制了IP,
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 马上注册

本版积分规则

QQ|手机版|小黑屋|手机版|联系我们|关于我们|广告合作|苏飞论坛 ( 豫ICP备18043678号-2)

GMT+8, 2024-11-24 04:20

© 2014-2021

快速回复 返回顶部 返回列表