苏飞论坛

标题: 如何使用webbrowser控件获取目标页面登陆后执行ajax后的返回内容? [打印本页]

---

作者: tylrr    时间: 2014-1-11 15:17
标题: 如何使用webbrowser控件获取目标页面登陆后执行ajax后的返回内容?

请教@站长苏飞 和大伙，如何使用webbrowser控件获取目标页面登陆后执行ajax后的返回内容?

可能有人问为什么要用webbrowser控件来采，因为目标网站需要登录才能采集，而且每次查询时ajax返回1000条数据，但是前台只显示10数据，所以直接采集ajax快很多。

另外ajax地址做了防采集的处理，登录网站后，直接请求ajax地址的话是不会返回数据的。    考虑到自己做登录比较麻烦，所以我想用浏览器控件来采集。

请大伙指点，谢谢

如图，我登陆目标页面后，用httpwatch监测到一个ajax执行后返回的response， 我想捕获content字段的内容。

(, 下载次数: 260)

上传

点击文件名下载附件

---

作者: 站长苏飞    时间: 2014-1-11 18:52
http://www.sufeinet.com/forum.ph ... ighlight=webbrowser看看第十一个

---

作者: tylrr    时间: 2014-1-11 19:24

站长苏飞 发表于 2014-1-11 18:52
http://www.sufeinet.com/forum.php?mod=viewthread&tid=3941&highlight=webbrowser看看第十一个

[C#] 纯文本查看 复制代码

private void webBrowser1_Navigated(object sender, WebBrowserNavigatedEventArgs e)

{

  //自动点击弹出确认或弹出提示

  IHTMLDocument2 vDocument = (IHTMLDocument2)webBrowser1.Document.DomDocument;

  vDocument.parentWindow.execScript("function confirm(str){return true;} ", "javascript"); //弹出确认

  vDocument.parentWindow.execScript("function alert(str){return true;} ", "javaScript");//弹出提示

}

@站长苏飞 是这个吗？
和我说的有什么关系呢？  不太明白哦~·  求解释，谢谢·~~！

---

作者: 站长苏飞    时间: 2014-1-11 19:45
第十九个说错了

---

作者: tylrr    时间: 2014-1-11 23:12

站长苏飞 发表于 2014-1-11 19:45
第十九个说错了

第十九个的方法我试过，是可行的。 问题是ajax每次返回1000条数据，但是前台只显示了10条数据。 如果用第十九个方法来获取的话，一次只能获取到10条数据，  效率很慢啊。  所以我才想直接采集ajax的。

---

作者: 站长苏飞    时间: 2014-1-13 08:00
不可能吧，他获取多少条就会取到多少条，和显示多少条没有关系吧。
你是不是看错了，你看的取的一千条但只显示的第一页吧。
如果是这样，他是每次翻页会再取后10条的，并不是你所说的一下子取了一千条，

---

作者: xieyx2003    时间: 2015-9-4 03:42
webBrowser1.Document.Body.OuterHtml;  AJAX 后的 网页源代码

---

作者: sanhill    时间: 2015-9-15 16:53

站长苏飞 发表于 2014-1-13 08:00
不可能吧，他获取多少条就会取到多少条，和显示多少条没有关系吧。
你是不是看错了，你看的取的一千条但只 ...

我遇到过这样的情况，ajax返回的数据是165条，显示的数据按照最多100条显示
。他的分页没有再次调用ajax。

因为我用httpwatch监控到网页数据发送接收情况。能够看到ajax调用接收了所有的数据。
分页的时候，没有发送任何数据到服务器。

我用webbrowser获取不到全部的数据，只能模拟分页来获取全部数据。比较繁琐。

---

欢迎光临 苏飞论坛 (http://www.sufeinet.com/)

Powered by Discuz! X3.4