Jsoup 解析 HTML

Jsoup 文档

方法

• 要取得一个属性的值，可以使用Node.attr(String key) 方法
• 对于一个元素中的文本，可以使用Element.text()方法
• 对于要取得元素或属性中的HTML内容，可以使用Element.html(), 或 Node.outerHtml()方法

示例：

String html = "<p>An <a href='http://example.com/'><b>example</b></a> link.</p>";

Document doc = Jsoup.parse(html);//解析HTML字符串返回一个Document实现

Element link = doc.select("a").first();//查找第一个a元素



String text = doc.body().text(); // "An example link"//取得字符串中的文本

String linkHref = link.attr("href"); // "http://example.com/"//取得链接地址

String linkText = link.text(); // "example""//取得链接地址中的文本



String linkOuterH = link.outerHtml(); 

    // "<a href="http://example.com"><b>example</b></a>"

String linkInnerH = link.html(); // "<b>example</b>"//取得链接内的html内容

说明

上述方法是元素数据访问的核心办法。此外还其它一些方法可以使用：

• Element.id()
• Element.tagName()
• Element.className() and Element.hasClass(String className)

这些访问器方法都有相应的setter方法来更改数据.

参见

• Element和Elements集合类的参考文档
• URLs处理
• 使用CSS选择器语法来查找元素

 

jsoup 是一款 Java 的HTML 解析器，可直接解析某个URL地址、HTML文本内容。它提供了一套非常省力的API，可通过DOM，CSS以及类似于JQuery的操作方法来取出和操作数据。请参考：http://jsoup.org/



    jsoup的主要功能如下：



     从一个URL，文件或字符串中解析HTML；



     使用DOM或CSS选择器来查找、取出数据；



     可操作HTML元素、属性、文本；



     jsoup是基于MIT协议发布的，可放心使用于商业项目。



    下载和安装：



     maven安装方法：



      把下面放入pom.xml下



       <dependency>



         <!-- jsoup HTML parser library @ http://jsoup.org/ -->



        <groupId>org.jsoup</groupId>



        <artifactId>jsoup</artifactId>



        <version>1.5.2</version>



       </dependency>



     用jsoup解析html的方法如下：



       解析url html方法







Document doc =Jsoup.connect("http://example.com") .data("query","Java")   .userAgent("Mozilla")   .cookie("auth","token")   .timeout(3000)   .post();





     从文件中解析的方法：











File input =newFile("/tmp/input.html");Document doc =Jsoup.parse(input,"UTF-8","http://example.com/");









 类试js  jsoup提供下面方法：







getElementById(String id) 用id获得元素



getElementsByTag(String tag) 用标签获得元素



getElementsByClass(String className) 用class获得元素



getElementsByAttribute(String key)  用属性获得元素







同时还提供下面的方法提供获取兄弟节点：



siblingElements(), firstElementSibling(), lastElementSibling();nextElementSibling(), previousElementSibling()



用下面方法获得元素的数据：







attr(String key)  获得元素的数据 



attr(String key, String value) t设置元素数据 



attributes() 获得所以属性 



id(), className()  classNames() 获得id class得值



text()获得文本值



text(String value) 设置文本值 



html() 获取html  



html(String value)设置html



outerHtml() 获得内部html 



data()获得数据内容



tag()  获得tag 和 tagName() 获得tagname







操作html提供了下面方法：







append(String html), prepend(String html)



appendText(String text), prependText(String text)



appendElement(String tagName), prependElement(String tagName)



html(String value)



通过类似jquery的方法操作html

File input =newFile("/tmp/input.html");Document doc =Jsoup.parse(input,"UTF-8","http://example.com/");Elements links = doc.select("a[href]");// a with hrefElements pngs = doc.select("img[src$=.png]");   // img with src ending .pngElement masthead = doc.select("div.masthead").first();   // div with class=mastheadElements resultLinks = doc.select("h3.r > a");// direct a after h3





支持的操作有下面这些：







tagname 操作tag



ns|tag ns或tag



#id  用id获得元素 



.class 用class获得元素



[attribute] 属性获得元素



[^attr]: 以attr开头的属性



[attr=value] 属性值为value



[attr^=value], [attr$=value], [attr*=value] 



[attr~=regex]正则



*:所以的标签 



选择组合

el#id el和id定位



el.class e1和class定位



el[attr] e1和属性定位



ancestor child ancestor下面的child



等等