httpWebRequest抓取asp.net分页数据

tuzibai · 发表于 2016-3-5 14:43:56

你好飞哥:

最近在做一个小工具，主要是抓取一些信息，PHP jsp asp 等网站数据用get或post基本上都能够抓取到想要的数据，但是ASP.NET用分页控件的网页一直抓取失败，主要是有一些

_VIEWSTATE:
__EVENTTARGET:

__doPostBack('Button2','')

__doPostBack('TEST1$Button1','')
__EVENTARGUMENT:

这样的隐藏域，截取了postdata后用post提交也不能获取任何信息，快被asp.net搞死了，求教这类网站如何抓取？？

例如下面网站：
http://www.qdnggzy.cn/qdnztb/jyxx/056002/056002001/MoreInfo.aspx?CategoryNum=056002001

我想直接获取第二页或者第三页的页面数据，请教如何抓取？？

tuzibai · 发表于 2016-3-9 11:48:35

@站长苏飞大家来支持下啊~~没人理吗

站长苏飞 · 发表于 2016-3-9 12:02:30

把这些参数都带上就行了

tuzibai · 发表于 2016-4-23 13:43:36

站长苏飞发表于 2016-3-9 12:02
把这些参数都带上就行了

在这不知道发csdn的帖子合适不合适
http://bbs.csdn.net/topics/391938456 飞哥，我这个问题一直还没有解决，能不能帮忙看看

tuzibai · 发表于 2016-4-25 09:25:45

已解决。。

byecom · 发表于 2016-5-3 00:02:17

楼主要是方便，留下详细的解决方法，供新人学习。谢谢

		自动登录	找回密码
密码			马上注册

[求助] httpWebRequest抓取asp.net分页数据