苏飞论坛

 找回密码
 马上注册

QQ登录

只需一步,快速开始

分布式系统框架(V2.0) 轻松承载百亿数据,千万流量!讨论专区 - 源码下载 - 官方教程

HttpHelper爬虫框架(V2.7-含.netcore) HttpHelper官方出品,爬虫框架讨论区 - 源码下载 - 在线测试和代码生成

HttpHelper爬虫类(V2.0) 开源的爬虫类,支持多种模式和属性 源码 - 代码生成器 - 讨论区 - 教程- 例子

楼主: 站长苏飞

[C#语言基础] C#Xpath解析HtmlDocument的使用方法与递归取得页面所有标签xpath值(附源码)

[复制链接]
发表于 2013-9-5 18:40:06 | 显示全部楼层
站长苏飞 发表于 2013-9-5 17:52
这个本文没有关系吧,这是HttpHelper方向的,是获取方向,而不是分析

也是。不过,就刚才的问题,ajax通过获取json动态生成的信息,怎么获取呢


1. 开通SVIP会员,免费下载本站所有源码,不限次数据,不限时间
2. 加官方QQ群,加官方微信群获取更多资源和帮助
3. 找站长苏飞做网站、商城、CRM、小程序、App、爬虫相关、项目外包等点这里
 楼主| 发表于 2013-9-5 18:45:05 | 显示全部楼层
天山明月 发表于 2013-9-5 18:40
也是。不过,就刚才的问题,ajax通过获取json动态生成的信息,怎么获取呢

直接请求Json网址,而不是所以网页地址,

就行了,HttpHelper也可以直接获取Json数据的,具体分析具体分析吧,
有问题可以到HttpHelper专区发帖子

发表于 2013-9-6 09:13:54 | 显示全部楼层
站长苏飞 发表于 2013-9-5 18:45
直接请求Json网址,而不是所以网页地址,

就行了,HttpHelper也可以直接获取Json数据的,具体分析具体 ...

就是这个地方比较困惑,json数据也获取到了,但是和展示的情况不一致。
仔细分析了一下,网站又使用了dwr推送


发表于 2014-1-24 19:48:07 | 显示全部楼层
受教了,学习中……
发表于 2014-5-31 11:04:10 | 显示全部楼层
受教了,学习中……
发表于 2014-12-9 21:57:46 | 显示全部楼层
递归效率很低,占用CPU很大,多线程下特明显
 楼主| 发表于 2014-12-10 08:24:18 | 显示全部楼层
sandy1231 发表于 2014-12-9 21:57
递归效率很低,占用CPU很大,多线程下特明显

什么事情都不能一概而论吧。不使用递归你想个更好的方法,可以在1秒内完成的。

在内存中。递归1W 和For或者是Do1W你感觉能差多少。有时候点Cpu效率慢要看情况,不一定就是递归引起的。

发表于 2014-12-11 20:32:11 | 显示全部楼层
站长苏飞 发表于 2014-12-10 08:24
什么事情都不能一概而论吧。不使用递归你想个更好的方法,可以在1秒内完成的。

在内存中。递归1W 和Fo ...

也是,不过这个执行的时间和http访问一次差不多了,除了递归获取所有节点好像没其他方法了吧?
发表于 2014-12-15 06:56:51 | 显示全部楼层
真好,这两天正在研究这个呢
发表于 2017-10-30 14:03:30 | 显示全部楼层
您需要登录后才可以回帖 登录 | 马上注册

本版积分规则

QQ|手机版|小黑屋|手机版|联系我们|关于我们|广告合作|苏飞论坛 ( 豫ICP备18043678号-2)

GMT+8, 2024-12-27 21:39

© 2014-2021

快速回复 返回顶部 返回列表