【网页抓取问题】如何获取JS执行过后的网页源代码？

.zZ · 发表于 2013-9-2 23:52:16

抓取网页的时候发现一个问题，就是如果网页的内容是使用JS生成的DOM在源代码里面就不会显示出来。
有没有什么办法可以获取JS执行后的DOM？
举个例子：http://item.taobao.com/item.htm?spm=a230r.1.14.90.F5XBQM&id=21128479264&_u=2k1h97e8627&initiative_new=1
我想获取这个淘宝页面的价格（活动价格），这个价格是（原价*折扣），这个处理是JS处理的。但是又找不到。。
所以直接在源代码里面就获取不了活动价格。
求指点。

970443232 · 发表于 2013-9-3 00:02:43

这个也不懂，不过好像要执行js的

参考下http://www.sufeinet.com/forum.ph ... ight=58%CD%AC%B3%C7

站长苏飞 · 发表于 2013-9-3 08:08:22

这个如果使用Http请求的方法，基本上是没有办法的，只有去执行JS和分析算法。

太阳雨 · 发表于 2013-9-3 09:42:30

http://ajax.tbcdn.cn/json/umpSto ... 1&sts=270274560,1170936092103278596,33024,4297080835&chnl=&price=3800&sellerId=1109924773&shopId=&cna=Vvh9ChQ0ETUCATzT%2FlYaEzak&ref=&buyerId=41423774&nick=&tg=274206720&tg2=1170935954655936644&tg3=72057594071482368&tg4=70643624247299&tg6=4096

都在这里，自己拼接参数吧。慢慢分析

		自动登录	找回密码
密码			马上注册

[其他] 【网页抓取问题】如何获取JS执行过后的网页源代码？