http://www.sufeinet.com/plugin.php?id=keke_group

苏飞论坛

 找回密码
 马上注册

QQ登录

只需一步,快速开始

分布式系统框架(V2.0) 轻松承载百亿数据,千万流量!讨论专区 - 源码下载 - 官方教程

HttpHelper爬虫框架(V2.7-含.netcore) HttpHelper官方出品,爬虫框架讨论区 - 源码下载 - 在线测试和代码生成

HttpHelper爬虫类(V2.0) 开源的爬虫类,支持多种模式和属性 源码 - 代码生成器 - 讨论区 - 教程- 例子

查看: 4347|回复: 4

[求助] gehtml 返回Nothing的问题

[复制链接]
发表于 2014-12-24 14:27:27 | 显示全部楼层 |阅读模式
代码很简单,一个网站抓取网页

  Try
            Dim http As New HttpHelper
            Dim item As New HttpItem
            item.URL = url
            item.Host = "www.it-ebooks.info"
            Dim rshttp As HttpResult = http.GetHtml(item)

            Return rshttp.Html

        Catch ex As Exception
            Return "f"
        End Try



发现抓抓了四个连接后就返回为 Nothing 了, 然后把程序关了,重新开又可以了。不知道为啥,对方服务器限制吗?那为啥关了程序重新开又可以,总感觉是我本地的问题


1. 开通SVIP会员,免费下载本站所有源码,不限次数据,不限时间
2. 加官方QQ群,加官方微信群获取更多资源和帮助
3. 找站长苏飞做网站、商城、CRM、小程序、App、爬虫相关、项目外包等点这里
发表于 2014-12-24 14:47:28 | 显示全部楼层
这个真不清楚,可以提供一下Url看看
 楼主| 发表于 2014-12-24 14:51:34 | 显示全部楼层
网址是 http://www.it-ebooks.info/ 我是抓去他的电子书页面   http://www.it-ebooks.info/book/****/   这种格式,头几次都没问题,一般是第四次后就返回nothing,重开程序又可以了。
 楼主| 发表于 2014-12-24 14:52:31 | 显示全部楼层
如果用 webclient   httprequest 的方式也一样就报错 “基础连接已经关闭: 无法连接到远程服务器。”
 楼主| 发表于 2014-12-24 15:11:16 | 显示全部楼层
在php里面用 file_get_contents 竟然毫无压力
您需要登录后才可以回帖 登录 | 马上注册

本版积分规则

QQ|手机版|小黑屋|手机版|联系我们|关于我们|广告合作|苏飞论坛 ( 豫ICP备18043678号-2)

GMT+8, 2024-11-15 14:50

© 2014-2021

快速回复 返回顶部 返回列表