只需一步,快速开始
分布式系统框架(V2.0) 轻松承载百亿数据,千万流量!讨论专区 - 源码下载 - 官方教程
HttpHelper爬虫框架(V2.7-含.netcore) HttpHelper官方出品,爬虫框架讨论区 - 源码下载 - 在线测试和代码生成
HttpHelper爬虫类(V2.0) 开源的爬虫类,支持多种模式和属性 源码 - 代码生成器 - 讨论区 - 教程- 例子
使用道具 举报
站长苏飞 发表于 2017-5-11 07:53 可以在服务端执行,客户端只传一部分参数过去,通过参数选择不同的网站抓取,这种应该是终极解决方案,
Lockey 发表于 2017-5-11 00:55 禁止代理,https的那些就捉不到了
站长苏飞 发表于 2017-5-11 08:36 是的IP全是服务器的,当然服务器是可以使用代理,或者多服务器,你在承受用户大量访问的同时也会获取到大量 ...
wy14104363 发表于 2017-5-11 08:39 我编了一个小米抢购软件,我的需求就是不想我的竞争对手很容易的获取到我用了哪些cookie,都访问了哪些网 ...
本版积分规则 发表回复 回帖后跳转到最后一页
|手机版|小黑屋|手机版|联系我们|关于我们|广告合作|苏飞论坛 ( 豫ICP备18043678号-2)
GMT+8, 2025-4-3 04:38
© 2014-2021