Python通过BeautifulSoup和lxml库高效解析HTML和XML,将结构化文本转化为树形数据模型。BeautifulSoup以容错性强、API简洁著称,适合处理不规范HTML;lxml性能优异,支持XPath与CSS选择器,适用于大型文件及严格标准的XML解析。

Python在处理HTML和XML这类结构化数据上,确实有几把刷子。简单来说,它主要是通过一些功能强大的第三方库,把这些原本对机器来说有点“乱”的文本,变成我们程序可以轻松理解和操作的数据结构,通常是树形的。这样一来,无论是从网页上抓取信息,还是处理各种配置文件、数据交换格式,都变得轻而易举。在我看来,掌握这些工具,就像是给你的Python工具箱里添了两把瑞士军刀,用处实在太广了。
要解析HTML和XML,Python社区提供了几个非常成熟且高效的库,其中最常用也最强大的莫过于
BeautifulSoup
lxml
BeautifulSoup
from bs4 import BeautifulSoup
html_doc = """
<html><head><title>我的页面</title></head>
<body>
<p class="title"><b>Hello World</b></p>
<p class="story">这是一个故事。
<a href="http://example.com/link1" class="sister" id="link1">链接1</a>,
<a href="http://example.com/link2" class="sister" id="link2">链接2</a>,
还有一些<a href="http://example.com/link3" class="sister" id="link3">链接3</a>。
</p>
<p class="story">...</p>
</body></html>
"""
soup = BeautifulSoup(html_doc, 'html.parser')
print(f"页面标题: {soup.title.string}")
print(f"第一个段落文本: {soup.p.text.strip()}")
print(f"所有链接的URL:")
for link in soup.find_all('a'):
print(link.get('href'))
# 使用CSS选择器
print(f"通过CSS选择器找到的类为'sister'的链接文本:")
for link in soup.select('a.sister'):
print(link.get_text())lxml
lxml
立即学习“Python免费学习笔记(深入)”;
from lxml import etree
# 解析HTML
html_doc_lxml = """
<html><head><title>我的页面</title></head>
<body>
<p class="title"><b>Hello World</b></p>
<p class="story">这是一个故事。
<a href="http://example.com/link1" class="sister" id="link1">链接1</a>,
<a href="http://example.com/link2" class="sister" id="link2">链接2</a>,
还有一些<a href="http://example.com/link3" class="sister" id="link3">链接3</a>。
</p>
<p class="story">...</p>
</body></html>
"""
# 使用HTML解析器
parser = etree.HTMLParser()
tree_html = etree.fromstring(html_doc_lxml, parser)
print(f"页面标题 (lxml): {tree_html.xpath('//title/text()')[0]}")
print(f"所有链接的URL (lxml):")
for link_href in tree_html.xpath('//a/@href'):
print(link_href)
# 解析XML
xml_doc = """
<root>
<item id="1">
<name>商品A</name>
<price>100</price>
</item>
<item id="2">
<name>商品B</name>
<price>200</price>
</item>
</root>
"""以上就是python怎么解析HTML和XML_python HTML与XML解析方法的详细内容,更多请关注php中文网其它相关文章!
HTML怎么学习?HTML怎么入门?HTML在哪学?HTML怎么学才快?不用担心,这里为大家提供了HTML速学教程(入门课程),有需要的小伙伴保存下载就能学习啦!
Copyright 2014-2025 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号