python爬虫怎么获取标签
要使用 Python 爬虫获取标签,可借助 BeautifulSoup 库:导入 BeautifulSoup获取 HTML 文档创建 BeautifulSoup 对象根据标签名称或属性查找标签提取标签内容(文本、HTML、属性)
如何使用 Python 爬虫获取标签
在 Python 爬虫中获取标签非常方便。这可以通过使用 BeautifulSoup 库来轻松实现,该库是一个用于从 HTML 和 XML 文档中解析数据的库。
步骤:
导入 BeautifulSoup:
立即学习“Python免费学习笔记(深入)”;
from bs4 import BeautifulSoup
获取 HTML 文档:
创建 BeautifulSoup 对象:
查找标签:
提取标签内容:
一旦找到标签,就可以通过以下方式提取标签内容:
示例:
from bs4 import BeautifulSoupimport requestsresponse = requests.get('https://example.com')soup = BeautifulSoup(response.text, 'html.parser')tags = soup.find_all('a')for tag in tags: print(tag.text, tag.get('href'))