苏飞论坛

 找回密码
 马上注册

QQ登录

只需一步,快速开始

分布式系统框架(V2.0) 轻松承载百亿数据,千万流量!讨论专区 - 源码下载 - 官方教程

HttpHelper爬虫框架(V2.7-含.netcore) HttpHelper官方出品,爬虫框架讨论区 - 源码下载 - 在线测试和代码生成

HttpHelper爬虫类(V2.0) 开源的爬虫类,支持多种模式和属性 源码 - 代码生成器 - 讨论区 - 教程- 例子

查看: 5789|回复: 5

[其他] 西祠网页源码解析问题

[复制链接]
发表于 2013-5-3 16:58:51 | 显示全部楼层 |阅读模式
  1. <script>
  2.       var G_CONFIG = {"cityId":142320114,"cityName":"南京","userId":28627837,"userLevel":8,"userLevelName":"注册网友","userName":"xlj_qq"};
  3.       var searchData = {"result":{"bAllCount":true,"BoardSort":{"datas":[]},"lPageCount":6090,"lPageNo":1,"lSearchType":1,"lType":0,"lView":0,"SearchBody":{"datas":[{"hfix_strTitle":"给安丰小学提个建议","lEndDocID":187694468,"lUserLevel":8,"OnlyDate":"13-05-01","strBdName":"安丰人论坛","strBdUrl":"/b1175985/","strDocUrl":"/b1175985/d187694468","strSearchUrl":"/b1175985/search.asp?key=%B6%AB%CC%A8","strTemp":"","strText":"能在课余准备一些茶水,使孩子们免于口渴。    都说孩子是末来的希望,末来的主人,请关心关心这些小主人吧。如果需要费用,可以向家长收集。    也希望<span class=higlighter>东台</span>教育部门留意其它学校的情况。 ","strTitle":"给安丰小学提个建议","strUserName":"似悟非悟"},{"hfix_strTitle":"安丰古街又添新景点,无相法师为新寺奠基","lEndDocID":187694423,"lUserLevel":8,"OnlyDate":"13-05-01","strBdName":"安丰人论坛","strBdUrl":"/b1175985/","strDocUrl":"/b1175985/d187694423","strSearchUrl":"/b1175985/search.asp?key=%B6%AB%CC%A8","strTemp":"","strText":"今天<span class=higlighter>东台</span>籍长老无相法师回乡为大寿庵奠基弘法  场面异常热闹.本人有幸到场目睹八十八高龄长老风彩.    并用相机记录下来,供大家欣赏. 小师傅们很年青啊 !老法师精神..","strTitle":"安丰古街又添新景点,无相法师为新寺奠基","strUserName":"似悟非悟"},{"hfix_strTitle":"省葫芦丝巴乌学会成立 我市四名代表出席","lEndDocID":187692515,"lUserLevel":8,"OnlyDate":"13-05-01","strBdName":"东台乡镇文化广场","strBdUrl":"/b1390025/","strDocUrl":"/b1390025/d187692515","strSearchUrl":"/b1390025/search.asp?key=%B6%AB%CC%A8","strTemp":"","strText":":15 [只看该作者]   4月27日,美丽的古都南京双门楼宾馆大院里鲜花怒放,阳光灿烂。江苏省音乐家协会葫芦丝巴乌学会成立大会在这里隆重举行。 我市<span class=higlighter>东台</span>金葫芦艺术团倪源义、张爱兰、叶忠玲、崔小红一行四人,因邀出席了成立大会。倪源义被聘任江苏省葫芦丝巴乌学会理事。 新当选的江苏省葫芦丝巴乌学会会长曾...","strTitle":"省葫芦丝巴乌学会成立 我市四名代表出席","strUserName":"草根的文化"},{"hfix_strTitle":"葛书记:东台一百姓深深地、深深地感谢您!","lEndDocID":187688399,"lUserLevel":8,"OnlyDate":"13-05-01","strBdName":"建湖人论坛","strBdUrl":"/b1223276/","strDocUrl":"/b1223276/d187688399","strSearchUrl":"/b1223276/search.asp?key=%B6%AB%CC%A8","strTemp":"","strText":"葛书记:您好!我是<span class=higlighter>东台</span>的一介小百姓,我的感谢微不足道,但是不当面跪谢您的大恩,我今生有憾。您的大恩大德小民我无以为报,愿好人一生平安! ","strTitle":"葛书记:东台一百姓深深地、深深地感谢您!","strUserName":"wufeihanwufeihan"},{"hfix_strTitle":"20130430原风景东台弶港创作采风花絮","lEndDocID":187684294,"lUserLevel":8,"OnlyDate":"13-05-01","strBdName":"东台摄友","strBdUrl":"/b1211143/","strDocUrl":"/b1211143/d187684294","strSearchUrl":"/b1211143/search.asp?key=%B6%AB%CC%A8","strTemp":"<img src=http://imgs.xici.net/_img/board/m0.gif width=15 height=15 align=absmiddle vspace=5> ","strText":":花彩妆造型馆 服   装:花彩妆造型馆、三洋摄影 20130430原风景<span class=higlighter>东台</span>弶港采风花絮 合影 20130430原风景<span class=higlighter>东台</span>弶港采风花絮 合影:  [雷_Ray] 什么双肩包什么户外装备都是浮云,渔民们下...很到位啊~  [solo_solo] 强大的花絮  [地地道道<span class=higlighter>东台</span>人] 条子泥围垦工程让人们亲密接触自然方便了很多, 但过去那...","strTitle":"20130430原风景东台弶港创作采风花絮","strUserName":"东台摄友"},{"hfix_strTitle":"水榭听香老师的新作——要嫁一个优秀的东台男人","lEndDocID":187664628,"lUserLevel":8,"OnlyDate":"13-04-30","strBdName":"东台百姓论坛","strBdUrl":"/b1111840/","strDocUrl":"/b1111840/d187664628","strSearchUrl":"/b1111840/search.asp?key=%B6%AB%CC%A8","strTemp":"","strText":"  此生不嫁<span class=higlighter>东台</span>人,再活千年也枉然!在江苏的北部,居住着一群机智、勇敢、温柔、帅气、善...人、他们就是&#8943;<span class=higlighter>东台</span>男人。<span class=higlighter>东台</span>男人凭借着他们那俊俏的外表,温柔的内心,已经征服了大江南北的大部分女性...越多的女生拜倒在<span class=higlighter>东台</span>男人的牛仔裤下,我们的目标就是:冲出亚洲,走向世界!人们都常说...","strTitle":"水榭听香老师的新作——要嫁一个优秀的东台男人","strUserName":"天厨星1"},{"hfix_strTitle":"【版友风采】玉笛飞声传万里,东淘才子倪源义","lEndDocID":187664435,"lUserLevel":8,"OnlyDate":"13-04-30","strBdName":"东台草根文化","strBdUrl":"/b1334921/","strDocUrl":"/b1334921/d187664435","strSearchUrl":"/b1334921/search.asp?key=%B6%AB%CC%A8","strTemp":"","strText":"儿又如同高山流水,让你不由自主的就陶醉在笛声中,走近一看,吹笛的原来是我们论坛版友倪源义先生,先生在<span class=higlighter>东台</span>可是一位大名人,擅写诗歌爱发新闻,对竹笛吹奏有很深造诣,并热衷于竹笛、葫芦丝的教育。     在古镇...子吹奏仍是他心中的最爱。     倪源义在年青时曾在艺术团体担任过专业竹笛演奏员,先后在<span class=higlighter>东台</span>市的群众文艺...","strTitle":"【版友风采】玉笛飞声传万里,东淘才子倪源义","strUserName":"天厨星1"},{"hfix_strTitle":"【版友风采】玉笛飞声传万里,东淘才子倪源义","lEndDocID":187664352,"lUserLevel":8,"OnlyDate":"13-04-30","strBdName":"东台百姓论坛","strBdUrl":"/b1111840/","strDocUrl":"/b1111840/d187664352","strSearchUrl":"/b1111840/search.asp?key=%B6%AB%CC%A8","strTemp":"<img src=http://imgs.xici.net/_img/board/icon_pic2.gif width=15 height=15 align=absmiddle vspace=5> ","strText":"自主的就陶醉在笛声中,走近一看,吹笛的原来是我们论坛版友倪源义先生,先生在<span class=higlighter>东台</span>可是一位大名人,擅写诗歌爱发新闻,对竹笛吹奏有很深造诣,并热衷于竹笛、...    倪源义在年青时曾在艺术团体担任过专业竹笛演奏员,先后在<span class=higlighter>东台</span>市的群众文艺汇演中多次获得大奖。他不断寻访名..在笛声中,走近一看,吹笛的原来是我们论坛版友倪源义先生...","strTitle":"【版友风采】玉笛飞声传万里,东淘才子倪源义","strUserName":"天厨星1"},{"hfix_strTitle":"省葫芦丝巴乌学会成立 我市四名代表出席","lEndDocID":187663933,"lUserLevel":8,"OnlyDate":"13-04-30","strBdName":"东台百姓论坛","strBdUrl":"/b1111840/","strDocUrl":"/b1111840/d187663933","strSearchUrl":"/b1111840/search.asp?key=%B6%AB%CC%A8","strTemp":"","strText":"  4月27日,美丽的古都南京双门楼宾馆大院里鲜花怒放,阳光灿烂。江苏省音乐家协会葫芦丝巴乌学会成立大会在这里隆重举行。 我市<span class=higlighter>东台</span>金葫芦艺术团倪源义、张爱兰、叶忠玲、崔小红一行四人,因邀出席了成立大会。倪源义被聘任江苏省葫芦丝巴乌学会理事。 新当选的江苏省葫芦丝巴乌学会会长曾...","strTitle":"省葫芦丝巴乌学会成立 我市四名代表出席","strUserName":"安丰源义"},{"hfix_strTitle":"扬州泰州盐城三市获批国家创新型试点城市","lEndDocID":187663650,"lUserLevel":8,"OnlyDate":"13-04-30","strBdName":"东台观察","strBdUrl":"/b1226336/","strDocUrl":"/b1226336/d187663650","strSearchUrl":"/b1226336/search.asp?key=%B6%AB%CC%A8","strTemp":"","strText":"有关部门积极支持其创新试点,在政策先行先试、项目、基地、人才等方面给予引导支持,并从重大科技专项等方面给予大力支持。(新华日报) [我是本分人] 看来<span class=higlighter>东台</span>将会有高新技术产业企业出现啊 ","strTitle":"扬州泰州盐城三市获批国家创新型试点城市","strUserName":"东台90后"}]},"sens":"","sFile":"?t=0&st=1&k=%B6%AB%CC%A8","strKey":"东台","sViewType":"/s/?"}};
  4.     </script>
复制代码
现在有西祠解析的问题,他的数据在script里面,用xpath无法解析。想问问高手这种类型应该怎么解析。


1. 开通SVIP会员,免费下载本站所有源码,不限次数据,不限时间
2. 加官方QQ群,加官方微信群获取更多资源和帮助
3. 找站长苏飞做网站、商城、CRM、小程序、App、爬虫相关、项目外包等点这里
发表于 2013-5-3 17:51:01 | 显示全部楼层
这是标签的Json数据,直接使用Json解析就行,或者你可以使用正则表达式的方法进行解析也可以的。你说说具体要怎么分析,分析出什么格式的数据,我可以帮你看看怎么写正则
 楼主| 发表于 2013-5-3 18:02:38 | 显示全部楼层
我要解析出链接,作者,时间,标题,内容。要对应起来的
发表于 2013-5-3 18:18:40 | 显示全部楼层
http://www.sufeinet.com/forum.php?mod=viewthread&tid=2733 你如果会解析Xml的话就简单了,我可以帮你转成Xml格式,用我上面的方法就行。
正则会不好一些,你使用我上面的方式试下吧,如果不行,没办法了再使用正则
 楼主| 发表于 2013-5-3 18:53:36 | 显示全部楼层
OK,现在再看Json如何解析,可以的话还是用Json直接解析好些
发表于 2013-5-3 20:10:10 | 显示全部楼层
xlj_qq 发表于 2013-5-3 18:53
OK,现在再看Json如何解析,可以的话还是用Json直接解析好些

直接使用我上面的方法转成Xml后,可以使用Xpath解析的。这样其实很方便的,因为HtmlXpath也是Xml,你把转化后的Xml传进去也是一样的,如果要处理Json其实比较麻烦,还要转对象之类的。你试试吧,如果不行再讨论
您需要登录后才可以回帖 登录 | 马上注册

本版积分规则

QQ|手机版|小黑屋|手机版|联系我们|关于我们|广告合作|苏飞论坛 ( 豫ICP备18043678号-2)

GMT+8, 2024-12-26 02:44

© 2014-2021

快速回复 返回顶部 返回列表