jsoup是Java中解析HTML的常用工具,提供类似CSS选择器的API,支持从字符串或URL加载页面,可提取元素、属性和文本。它适用于静态网页抓取,但无法执行JavaScript,对动态内容需结合其他工具或调用接口,并需注意遵守网站规则与设置合理请求参数。

使用 jsoup 解析 HTML 是 Java 开发中处理网页内容的常用方式。它提供了非常简洁的 API 来提取和操作 HTML 数据,支持类似 CSS 选择器的语法,还能处理不规范的 HTML 结构。
如果你使用 Maven,在 pom.xml 中添加以下依赖:
<dependency>
<groupId>org.jsoup</groupId>
<artifactId>jsoup</artifactId>
<version>1.16.1</version>
</dependency>
Gradle 用户则在 build.gradle 添加:
implementation 'org.jsoup:jsoup:1.16.1'
jsoup 可以直接解析 HTML 字符串,也可以从网络加载页面。
立即学习“前端免费学习笔记(深入)”;
从 URL 加载:
Document doc = Jsoup.connect("https://example.com").get();
String title = doc.title();
设置请求参数(如超时、User-Agent):
Document doc = Jsoup.connect("https://example.com")
.userAgent("Mozilla/5.0")
.timeout(3000)
.get();
解析本地 HTML 字符串:
String html = "<html><body><p class='content'>Hello jsoup!</p></body></html>"; Document doc = Jsoup.parse(html);
jsoup 支持类似 CSS 选择器的方式查找元素。
doc.title()
doc.select("p")
doc.select(".content")
doc.select("#header")
doc.select("div.content p")
element.attr("href")
element.text()
示例:提取所有链接的文本和地址
Elements links = doc.select("a[href]");
for (Element link : links) {
System.out.println("Text: " + link.text());
System.out.println("URL: " + link.attr("href"));
}
jsoup 是基于静态 HTML 解析的,无法执行 JavaScript。如果目标页面内容由 AJAX 动态加载,直接用 jsoup 可能拿不到完整数据。
应对方法:
另外注意遵守网站的 robots.txt 和服务条款,避免高频请求。
基本上就这些。jsoup 上手快,适合抓取静态网页内容,写爬虫或做内容提取都很方便。关键在于熟悉选择器语法和文档结构遍历方式。不复杂但容易忽略细节,比如编码、超时设置等。
以上就是jsoup解析html的详细内容,更多请关注php中文网其它相关文章!
每个人都需要一台速度更快、更稳定的 PC。随着时间的推移,垃圾文件、旧注册表数据和不必要的后台进程会占用资源并降低性能。幸运的是,许多工具可以让 Windows 保持平稳运行。
Copyright 2014-2025 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号