HttpWebResponse获取网页HTML

kidsoft · 发表于 2013-4-15 16:18:44

VS2012代码，见附件！

站长苏飞 · 发表于 2013-4-15 16:31:59

kidsoft 发表于 2013-4-15 16:18
VS2012代码，见附件！

取到的内容是什么你发上来我看一下，看看和我获取的是否一样

kidsoft · 发表于 2013-4-15 16:37:31

站长苏飞发表于 2013-4-15 16:31
取到的内容是什么你发上来我看一下，看看和我获取的是否一样

站长苏飞 · 发表于 2013-4-15 18:05:43

kidsoft 发表于 2013-4-15 16:37

下班了，确实有这个问题，明天来了帮你看看

站长苏飞 · 发表于 2013-4-16 08:56:35

[code=csharp]  HttpHelper http = new HttpHelper();
         HttpItem item = new HttpItem()
         {
            URL = "http://www.soso.com/q?sc=web&bs=%C3%C0%B9%FA%B4%F3%C6%AC&ch=w.uf&num=10&w=%C3%C0%B9%FA%B4%F3%C6%AC",//URL这里都是测试    必需项
            Encoding = null,//编码格式（utf-8,gb2312,gbk）    可选项默认类会自动识别
            //Encoding = Encoding.Default,
            Method = "get",//URL    可选项默认为Get
         };
         //得到HTML代码
         HttpResult result = http.GetHtml(item);[/code]
这样可以取到，使用最新版的类，

kidsoft · 发表于 2013-4-16 09:05:00

上面那个链接没有|符号[百度百科]，所以测试结果正确。刚在网站下载了最新的HttpHelper，结果仍然一样。还是无法读取全部，当有|的情况下。

站长苏飞 · 发表于 2013-4-16 09:06:51

kidsoft 发表于 2013-4-16 09:05
上面那个链接没有|符号[百度百科]，所以测试结果正确。刚在网站下载了最新的HttpHelper，结果仍然一样。还是 ...

那你说一个不行的，我看看

kidsoft · 发表于 2013-4-16 09:08:03

http://www.soso.com/q?pid=s.idx& ... 0%B9%FA%B5%E7%D3%B0
在winform里肯定获取不到全部。因为出现了|

站长苏飞 · 发表于 2013-4-16 09:23:13

kidsoft 发表于 2013-4-16 09:08
http://www.soso.com/q?pid=s.idx&cid=s.idx.se&w=%C3%C0%B9%FA%B5%E7%D3%B0
在winform里肯定获取不到全部 ...

我靠还真是，我有时间再研究下，这个问题还真没碰到过，为什么出现|之后就没数据了呢？你要试试，我这边有结果了给你贴代码。呵呵，现在我也不清楚怎么解决啊

kidsoft · 发表于 2013-4-16 09:25:05

我现在最奇怪的一件事情是：在你的网页上测试，居然结果是正确的，能获取到全部的内容。所以我就特别的奇怪。

		自动登录	找回密码
密码			马上注册

[抓取] HttpWebResponse获取网页HTML