http://www.sufeinet.com/plugin.php?id=keke_group

苏飞论坛

 找回密码
 马上注册

QQ登录

只需一步,快速开始

分布式系统框架(V2.0) 轻松承载百亿数据,千万流量!讨论专区 - 源码下载 - 官方教程

HttpHelper爬虫框架(V2.7-含.netcore) HttpHelper官方出品,爬虫框架讨论区 - 源码下载 - 在线测试和代码生成

HttpHelper爬虫类(V2.0) 开源的爬虫类,支持多种模式和属性 源码 - 代码生成器 - 讨论区 - 教程- 例子

查看: 8764|回复: 14

[HttpHelper] 关于GET最新数据的问题。

[复制链接]
发表于 2016-9-13 22:57:17 | 显示全部楼层 |阅读模式
飞哥,我试用httphelper类或者是框架利用GET方法每隔一段时间去一个网站获取一次数据。开始是正常的。但是在连续运行了很长时间以后,发现GET到的数据并不是最新的了。程序也没有内存溢出。请问这种现象是怎么回事呢?


1. 开通SVIP会员,免费下载本站所有源码,不限次数据,不限时间
2. 加官方QQ群,加官方微信群获取更多资源和帮助
3. 找站长苏飞做网站、商城、CRM、小程序、App、爬虫相关、项目外包等点这里
发表于 2016-9-13 23:03:38 | 显示全部楼层
重新打开是最新的吗?会不会是服务器有缓存
 楼主| 发表于 2016-9-13 23:31:04 | 显示全部楼层
重新打开程序以后是最新的。。。
用浏览器打开这个网站获取到的也是最新的。这是最骚的。客户老是说我写的有问题。。
 楼主| 发表于 2016-9-13 23:31:36 | 显示全部楼层
站长苏飞 发表于 2016-9-13 23:03
重新打开是最新的吗?会不会是服务器有缓存

重新打开程序以后是最新的。。。
用浏览器打开这个网站获取到的也是最新的。这是最骚的。客户老是说我写的有问题。。
发表于 2016-9-14 08:56:52 | 显示全部楼层
zdking 发表于 2016-9-13 23:31
重新打开程序以后是最新的。。。
用浏览器打开这个网站获取到的也是最新的。这是最骚的。客户老是说我写 ...

这个有点奇怪啊。你这样,如果发现有不是最新的重新New一个Htttphelper对象出来,如果是因为对象的问题我这边再优化一下,感觉不像,因为我并没有做任何缓存之类的东西。
 楼主| 发表于 2016-9-14 10:10:40 | 显示全部楼层
站长苏飞 发表于 2016-9-14 08:56
这个有点奇怪啊。你这样,如果发现有不是最新的重新New一个Htttphelper对象出来,如果是因为对象的问题我 ...

确实很奇怪。我也发现了。我现在是用完了以后就把httphelper=null一下。然后强制资源回收一次。
现在好像没再发生类似的问题了。但是我不确定问题是不是得到了彻底的解决。总之谢谢飞哥了
发表于 2016-9-14 11:02:43 | 显示全部楼层
zdking 发表于 2016-9-14 10:10
确实很奇怪。我也发现了。我现在是用完了以后就把httphelper=null一下。然后强制资源回收一次。
现在好 ...

先这样解决,我有时间了研究一下,看具体是什么原因,方便的话可以提供一个你的网址
 楼主| 发表于 2016-9-14 15:30:29 | 显示全部楼层
站长苏飞 发表于 2016-9-14 11:02
先这样解决,我有时间了研究一下,看具体是什么原因,方便的话可以提供一个你的网址

外网访问不了的。飞哥。再次谢谢啦
发表于 2016-9-14 16:50:43 | 显示全部楼层
zdking 发表于 2016-9-14 15:30
外网访问不了的。飞哥。再次谢谢啦

好的,我回头看看是不是代码问题
 楼主| 发表于 2016-9-16 00:54:33 | 显示全部楼层
站长苏飞 发表于 2016-9-14 16:50
好的,我回头看看是不是代码问题

飞哥,还是这个问题。再给你补充一点。
是这样:
我打开一个网页。这个网页会根据IP地址的不同来显示不同的内容。
我先挂了一个VPN。打开软件。获得的内容是VPN的地址访问的内容。这个是正确的。
然后我断开VPN。这时候获得的内容按道理说应该是我本地的IP地址访问的内容。
我没有关闭软件,直接new一个HttpHelper出来。可是访问以后,发现还是我挂上VPN显示的内容。
用浏览器打开显示的也是本地访问的内容。
如果我关闭软件,直接打开,就显示的是我本地IP访问时候的内容了。
您需要登录后才可以回帖 登录 | 马上注册

本版积分规则

QQ|手机版|小黑屋|手机版|联系我们|关于我们|广告合作|苏飞论坛 ( 豫ICP备18043678号-2)

GMT+8, 2024-11-23 10:04

© 2014-2021

快速回复 返回顶部 返回列表