Jsoup 解析 HTML

Jsoup 文档

方法

• 要取得一个属性的值，可以使用Node.attr(String key) 方法
• 对于一个元素中的文本，可以使用Element.text()方法
• 对于要取得元素或属性中的HTML内容，可以使用Element.html(), 或 Node.outerHtml()方法

示例：

String html = "<p>An <a href='http://example.com/'><b>example</b></a> link.</p>";
Document doc = Jsoup.parse(html);//解析HTML字符串返回一个Document实现
Element link = doc.select("a").first();//查找第一个a元素

String text = doc.body().text(); // "An example link"//取得字符串中的文本
String linkHref = link.attr("href"); // "http://example.com/"//取得链接地址
String linkText = link.text(); // "example""//取得链接地址中的文本

String linkOuterH = link.outerHtml(); 
    // "<a href="http://example.com"><b>example</b></a>"
String linkInnerH = link.html(); // "<b>example</b>"//取得链接内的html内容

说明

上述方法是元素数据访问的核心办法。此外还其它一些方法可以使用：

• Element.id()
• Element.tagName()
• Element.className() and Element.hasClass(String className)

这些访问器方法都有相应的setter方法来更改数据.

参见

• Element和Elements集合类的参考文档
• URLs处理
• 使用CSS选择器语法来查找元素

 

jsoup 是一款 Java 的HTML 解析器，可直接解析某个URL地址、HTML文本内容。它提供了一套非常省力的API，可通过DOM，CSS以及类似于JQuery的操作方法来取出和操作数据。请参考：http://jsoup.org/

    jsoup的主要功能如下：

     从一个URL，文件或字符串中解析HTML；

     使用DOM或CSS选择器来查找、取出数据；

     可操作HTML元素、属性、文本；

     jsoup是基于MIT协议发布的，可放心使用于商业项目。

    下载和安装：

     maven安装方法：

      把下面放入pom.xml下

       <dependency>

         <!-- jsoup HTML parser library @ http://jsoup.org/ -->

        <groupId>org.jsoup</groupId>

        <artifactId>jsoup</artifactId>

        <version>1.5.2</version>

       </dependency>

     用jsoup解析html的方法如下：

       解析url html方法



Document doc =Jsoup.connect("http://example.com") .data("query","Java")   .userAgent("Mozilla")   .cookie("auth","token")   .timeout(3000)   .post();


     从文件中解析的方法：





File input =newFile("/tmp/input.html");Document doc =Jsoup.parse(input,"UTF-8","http://example.com/");




 类试js  jsoup提供下面方法：



getElementById(String id) 用id获得元素

getElementsByTag(String tag) 用标签获得元素

getElementsByClass(String className) 用class获得元素

getElementsByAttribute(String key)  用属性获得元素



同时还提供下面的方法提供获取兄弟节点：

siblingElements(), firstElementSibling(), lastElementSibling();nextElementSibling(), previousElementSibling()

用下面方法获得元素的数据：



attr(String key)  获得元素的数据 

attr(String key, String value) t设置元素数据 

attributes() 获得所以属性 

id(), className()  classNames() 获得id class得值

text()获得文本值

text(String value) 设置文本值 

html() 获取html  

html(String value)设置html

outerHtml() 获得内部html 

data()获得数据内容

tag()  获得tag 和 tagName() 获得tagname



操作html提供了下面方法：



append(String html), prepend(String html)

appendText(String text), prependText(String text)

appendElement(String tagName), prependElement(String tagName)

html(String value)

通过类似jquery的方法操作html
File input =newFile("/tmp/input.html");Document doc =Jsoup.parse(input,"UTF-8","http://example.com/");Elements links = doc.select("a[href]");// a with hrefElements pngs = doc.select("img[src$=.png]");   // img with src ending .pngElement masthead = doc.select("div.masthead").first();   // div with class=mastheadElements resultLinks = doc.select("h3.r > a");// direct a after h3


支持的操作有下面这些：



tagname 操作tag

ns|tag ns或tag

#id  用id获得元素 

.class 用class获得元素

[attribute] 属性获得元素

[^attr]: 以attr开头的属性

[attr=value] 属性值为value

[attr^=value], [attr$=value], [attr*=value] 

[attr~=regex]正则

*:所以的标签 

选择组合
el#id el和id定位

el.class e1和class定位

el[attr] e1和属性定位

ancestor child ancestor下面的child

等等