zoukankan      html  css  js  c++  java
  • 使用 jsoup 解析HTML

    // 参考资料:
        //  http://www.jb51.net/article/43485.htm
        
        @Test
         public void  AnalysisHTMLByString()
         {
            String  html="<p><a href="a.html">a</p><p> 文本</p>";
            Document doc = Jsoup.parse(html);
            Elements ele=doc.getElementsByTag("p");
            for(Element e :ele)
            {
                  System.out.println(e.text());
                
            }
            
            
        }
        
        @Test
        public void AnlysisHTMLByFile() throws IOException
        {
             File file=new File(System.getProperty("user.dir")+"\a.html");
             Document doc=Jsoup.parse(file, "UTF-8");
             Elements eles=doc.getElementsByTag("a");
             for(Element e :eles)
             {
                   System.out.println(e.text());
                   System.out.println(e.attr("href"));
             }
            Element ele =doc.getElementById("btn");
            System.out.println(ele.html());
            
        }
        
        @Test
        public void  AnlysisHTMLByURL() throws IOException
        {
            int  timeout=3000;
           Document doc=  Jsoup.connect("http://www.cnblogs.com/rhythmK/").get();
           
           //获取A标签个数
           System.out.println("共有超链接:"+ doc.getElementsByTag("a").size());
           
           System.out.println("获取指定ID:"+ doc.getElementById("navigator").html());
           
            Elements eles= doc.select("#navigator");
            for(Element ele :eles)
            {
                System.out.println(ele.html());
            }
        }

    Elements这个对象提供了一系列类似于DOM的方法来查找元素,抽取并处理其中的数据。具体如下:
    查找元素
    getElementById(String id)
    getElementsByTag(String tag)
    getElementsByClass(String className)
    getElementsByAttribute(String key) (and related methods)
    Element siblings: siblingElements(), firstElementSibling(), lastElementSibling();nextElementSibling(), previousElementSibling()
    Graph: parent(), children(), child(int index)
    元素数据
    attr(String key)获取属性attr(String key, String value)设置属性
    attributes()获取所有属性
    id(), className() and classNames()
    text()获取文本内容text(String value) 设置文本内容
    html()获取元素内HTMLhtml(String value)设置元素内的HTML内容
    outerHtml()获取元素外HTML内容
    data()获取数据内容(例如:script和style标签)
    tag() and tagName()
    操作HTML和文本
    append(String html), prepend(String html)
    appendText(String text), prependText(String text)
    appendElement(String tagName), prependElement(String tagName)
    html(String value)


    Selector选择器概述
    tagname: 通过标签查找元素,比如:a
    ns|tag: 通过标签在命名空间查找元素,比如:可以用 fb|name 语法来查找 <fb:name> 元素
    #id: 通过ID查找元素,比如:#logo
    .class: 通过class名称查找元素,比如:.masthead
    [attribute]: 利用属性查找元素,比如:[href]
    [^attr]: 利用属性名前缀来查找元素,比如:可以用[^data-] 来查找带有HTML5 Dataset属性的元素
    [attr=value]: 利用属性值来查找元素,比如:[width=500]
    [attr^=value], [attr$=value], [attr*=value]: 利用匹配属性值开头、结尾或包含属性值来查找元素,比如:[href*=/path/]
    [attr~=regex]: 利用属性值匹配正则表达式来查找元素,比如: img[src~=(?i).(png|jpe?g)]
    *: 这个符号将匹配所有元素
    Selector选择器组合使用
    el#id: 元素+ID,比如: div#logo
    el.class: 元素+class,比如: div.masthead
    el[attr]: 元素+class,比如: a[href]
    任意组合,比如:a[href].highlight
    ancestor child: 查找某个元素下子元素,比如:可以用.body p 查找在"body"元素下的所有p元素
    parent > child: 查找某个父元素下的直接子元素,比如:可以用div.content > p 查找 p 元素,也可以用body > * 查找body标签下所有直接子元素
    siblingA + siblingB: 查找在A元素之前第一个同级元素B,比如:div.head + div
    siblingA ~ siblingX: 查找A元素之前的同级X元素,比如:h1 ~ p
    el, el, el:多个选择器组合,查找匹配任一选择器的唯一元素,例如:div.masthead, div.logo
    伪选择器selectors
    :lt(n): 查找哪些元素的同级索引值(它的位置在DOM树中是相对于它的父节点)小于n,比如:td:lt(3) 表示小于三列的元素
    :gt(n):查找哪些元素的同级索引值大于n,比如: div p:gt(2)表示哪些div中有包含2个以上的p元素
    :eq(n): 查找哪些元素的同级索引值与n相等,比如:form input:eq(1)表示包含一个input标签的Form元素
    :has(seletor): 查找匹配选择器包含元素的元素,比如:div:has(p)表示哪些div包含了p元素
    :not(selector): 查找与选择器不匹配的元素,比如: div:not(.logo) 表示不包含 class="logo" 元素的所有 div 列表
    :contains(text): 查找包含给定文本的元素,搜索不区分大不写,比如: p:contains(jsoup)
    :containsOwn(text): 查找直接包含给定文本的元素
    :matches(regex): 查找哪些元素的文本匹配指定的正则表达式,比如:div:matches((?i)login)
    :matchesOwn(regex): 查找自身包含文本匹配指定正则表达式的元素
    注意:上述伪选择器索引是从0开始的,也就是说第一个元素索引值为0,第二个元素index为1等
    可以查看Selector API参考来了解更详细的内容

  • 相关阅读:
    杨辉三角形II(Pascal's Triangle II)
    easyUI DataGrid 分页
    var, object, dynamic的区别以及dynamic的使用
    如何防止程序多次运行
    HTTP报文
    值类型,引用类型,栈,堆,ref,out
    Robotlegs框架1.5简介
    TOGAF架构内容框架之内容元模型(下)
    ZOJ 1204 一个集合能组成多少个等式
    画透明位图
  • 原文地址:https://www.cnblogs.com/rhythmK/p/4037572.html
Copyright © 2011-2022 走看看