如何使用webbrowser控件获取目标页面登陆后执行ajax后的返回内容?

tylrr

请教@站长苏飞 和大伙，如何使用webbrowser控件获取目标页面登陆后执行ajax后的返回内容?

可能有人问为什么要用webbrowser控件来采，因为目标网站需要登录才能采集，而且每次查询时ajax返回1000条数据，但是前台只显示10数据，所以直接采集ajax快很多。

另外ajax地址做了防采集的处理，登录网站后，直接请求ajax地址的话是不会返回数据的。    考虑到自己做登录比较麻烦，所以我想用浏览器控件来采集。

请大伙指点，谢谢

如图，我登陆目标页面后，用httpwatch监测到一个ajax执行后返回的response， 我想捕获content字段的内容。

站长苏飞

http://www.sufeinet.com/forum.ph ... ighlight=webbrowser看看第十一个

tylrr

站长苏飞 发表于 2014-1-11 18:52
http://www.sufeinet.com/forum.php?mod=viewthread&tid=3941&highlight=webbrowser看看第十一个

[C#] 纯文本查看 复制代码

private void webBrowser1_Navigated(object sender, WebBrowserNavigatedEventArgs e)
{
  //自动点击弹出确认或弹出提示
  IHTMLDocument2 vDocument = (IHTMLDocument2)webBrowser1.Document.DomDocument;
  vDocument.parentWindow.execScript("function confirm(str){return true;} ", "javascript"); //弹出确认
  vDocument.parentWindow.execScript("function alert(str){return true;} ", "javaScript");//弹出提示
}

@站长苏飞 是这个吗？
和我说的有什么关系呢？  不太明白哦~·  求解释，谢谢·~~！

站长苏飞

第十九个说错了

tylrr

站长苏飞 发表于 2014-1-11 19:45
第十九个说错了

第十九个的方法我试过，是可行的。 问题是ajax每次返回1000条数据，但是前台只显示了10条数据。 如果用第十九个方法来获取的话，一次只能获取到10条数据，  效率很慢啊。  所以我才想直接采集ajax的。

站长苏飞

不可能吧，他获取多少条就会取到多少条，和显示多少条没有关系吧。
你是不是看错了，你看的取的一千条但只显示的第一页吧。
如果是这样，他是每次翻页会再取后10条的，并不是你所说的一下子取了一千条，

xieyx2003

webBrowser1.Document.Body.OuterHtml;  AJAX 后的 网页源代码

sanhill

站长苏飞 发表于 2014-1-13 08:00
不可能吧，他获取多少条就会取到多少条，和显示多少条没有关系吧。
你是不是看错了，你看的取的一千条但只 ...

我遇到过这样的情况，ajax返回的数据是165条，显示的数据按照最多100条显示
。他的分页没有再次调用ajax。

因为我用httpwatch监控到网页数据发送接收情况。能够看到ajax调用接收了所有的数据。
分页的时候，没有发送任何数据到服务器。

我用webbrowser获取不到全部的数据，只能模拟分页来获取全部数据。比较繁琐。