python 爬取列表

Python作为一种强大的编程语言，被广泛利用于各种数据爬取中，其中之一就是爬取列表。本文将介绍怎样使用Python爬取列表。

import requests
from bs4 import BeautifulSoup
url = "网页链接"
response = requests.get(url)
soup = BeautifulSoup(response.text, "html.parser")
list_items = soup.find_all("li") # 查找所有的li标签
for item in list_items:
print(item.text) # 输出列表项的文本内容

首先，导入所需的库，requests用于发送要求，BeautifulSoup用于解析HTML。将要爬取的网页链接作为url变量，使用requests.get()函数发送GET要求，取得响应。然后，使用BeautifulSoup解析响应文本，得到一个美味汤，保存在soup中。

接下来，使用find_all()函数查找列表中的所有li标签，并将结果保存在list_items列表中。最后，遍历list_items，输出每项的文本内容。由于BeautifulSoup会将HTML标签过滤掉，因此item.text可以获得到文本内容。

以上即为使用Python爬取列表的方法。你可以根据需要修改代码，例如改成爬取其他标签，如table、div等等。二次开发该代码，也能用于爬取各类网页信息。