• Jsoup -- 网络爬虫解析器


    需要下载jsoup-1.8.1.jar包

    jsoup 是一款Java 的HTML解析器,可直接解析某个URL地址、HTML文本内容。它提供了一套非常省力的API,可通过DOM,CSS以及类似于jQuery的操作方法来取出和操作数据。

    网页获取和解析速度飞快,推荐使用。
    主要功能如下:
    1. 从一个URL,文件或字符串中解析HTML;
    2. 使用DOM或CSS选择器来查找、取出数据;
    3. 可操作HTML元素、属性、文本;

    范例代码如下:

    Java代码  收藏代码
    1. package cn.ysh.studio.crawler.jsoup;  
    2.   
    3. import java.io.IOException;  
    4. import org.jsoup.Jsoup;  
    5.   
    6. /** 
    7.  * 基于Jsoup抓取网页内容 
    8.  * @author www.yshjava.cn 
    9.  */  
    10. public class JsoupTest {  
    11.   
    12.     public static void main(String[] args) throws IOException {  
    13.         //目标页面  
    14.         String url = "http://www.yshjava.cn";  
    15.         //使用Jsoup连接目标页面,并执行请求,获取服务器响应内容  
    16.         String html = Jsoup.connect(url).execute().body();  
    17.         //打印页面内容  
    18.         System.out.println(html);  
    19.     }  
    20. }  
  • 相关阅读:
    Shell编程——基于IBM培训教程的总结
    flex上下固定中间滚动布局
    exe 转服务
    itextcsharp使用
    devices detect
    [转]Java api 全集 【API JDK1.6中文版】
    JavaScript 项目优化总结
    服务程序打包
    knockoutjs
    C#压缩《收藏》
  • 原文地址:https://www.cnblogs.com/huangwentian/p/6484688.html
Copyright © 2020-2023  润新知