首页 诗词 字典 板报 句子 名言 友答 励志 学校 网站地图
当前位置: 首页 > 教程频道 > 网站开发 > JavaScript >

javascript动态生成网页抓取议案

2013-03-29 
javascript动态生成网页抓取方案第一步,用htmlunit将网页抓取下来,htmlunit是一个内置javascript解析引擎

javascript动态生成网页抓取方案

第一步,用htmlunit将网页抓取下来,htmlunit是一个内置javascript解析引擎的无页面浏览器,不仅可以抓取html内容本身,还可以执行里面的js脚本生成动态页面,这点上比wget、httpclient强。它以jar的形式集成到应用提供api给java调用,执行效率也不错。

?

第二步,用jsoup对htmlunit抓取下来的网页进行解析,jsoup支持采用类似于jquery选择器的方式访问页面上的tag节点,易于操作。

?

热点排行