怎么使用httphelper抓取webbrowser加载之后的页面的源码？

luobin · 发表于 2014-1-8 11:18:06

我现在有一个网站的数据要抓取，这个网站要登录，查询数据的时候要等到网站加载完毕后所有的数据才可以出来！我不知道怎么使用httphelper来实现，请各位高手说个思路呗！{:soso_e101:}

luobin · 发表于 2014-1-8 11:20:02

还有，有没有使用httphelper抓取网页数据的事例，我是新手看不懂太多的代码呀！

站长苏飞 · 发表于 2014-1-8 12:02:13

这个没办法直接获取，如果是Ajax请求的需要单独去请求这个连接，Httphelper只能实现单次请求，
你说是是那个网站，这个要具体分析的。
例子你So赶集网的，我写的有例子

luobin · 发表于 2014-1-8 12:50:57

站长苏飞发表于 2014-1-8 12:02
这个没办法直接获取，如果是Ajax请求的需要单独去请求这个连接，Httphelper只能实现单次请求，
你说是是那 ...

如果要想获取包含ajax的页面源码，一般的思路是怎样的呢？

站长苏飞 · 发表于 2014-1-8 13:12:09

抓包看看Ajax请求的地址，头信息以及Post内容，然后模拟，和模拟获取网页数据是一样的。可以使用Firbug看看

		自动登录	找回密码
密码			马上注册

[求助] 怎么使用httphelper抓取webbrowser加载之后的页面的源码？