为什么软件get获得的html和浏览器访问的不一样的呢

sandy1231 · 发表于 2013-12-8 18:43:11

请问为什么软件get获得的html和浏览器访问的不一样的呢
比如说http://www.google.com.hk/search?q=site%3Awww.baidu.com 使用httphelper 获得的html却是繁体中文，以及结果不一样。谢谢

站长苏飞 · 发表于 2013-12-9 08:18:27

肯定是不一样的啊，浏览器会执行JS，会解析Html，Http请求只是返回原始的Html代码

sandy1231 · 发表于 2013-12-10 11:42:12

站长苏飞发表于 2013-12-9 08:18
肯定是不一样的啊，浏览器会执行JS，会解析Html，Http请求只是返回原始的Html代码

用的httphelper访问，那怎么样才能使与浏览器获取的一样呢

站长苏飞 · 发表于 2013-12-10 11:43:38

sandy1231 发表于 2013-12-10 11:42
用的httphelper访问，那怎么样才能使与浏览器获取的一样呢

你看看浏览器都执行了什么，需要慢慢分析，看看Htttphelper没有的Cookie是怎么生成的，然后想办法生成。别的没什么好办法

站长苏飞 · 发表于 2013-12-10 11:48:30

你这个好像通过参数设置，设置为中文简体就行了吧。Google有参数可以控制，你查查

sandy1231 · 发表于 2013-12-10 18:02:35

站长苏飞发表于 2013-12-10 11:48
你这个好像通过参数设置，设置为中文简体就行了吧。Google有参数可以控制，你查查

http://www.google.com.hk/search? ... ite%3Awww.17usa.com 参数设置成了这样，返回302，之后把Allowautoredirect 设置成了true, 有时返回 “重定向次数过多”，有时提示“远程服务器返回错误: (503) 服务器不可用。” 这是什么问题飞哥

站长苏飞 · 发表于 2013-12-10 18:42:16

设置为False，然后再请求，获取请求的Cookei再重定向

sandy1231 · 发表于 2013-12-10 20:00:06

站长苏飞发表于 2013-12-10 18:42
设置为False，然后再请求，获取请求的Cookei再重定向

搞定谢谢飞哥

		自动登录	找回密码
密码			马上注册

[其他] 为什么软件get获得的html和浏览器访问的不一样的呢