可以使用 Python 爬虫获取电影信息，具体步骤如下：导入 requests 和 BeautifulSoup 库。确定目标网站的 URL。发送 HTTP GET 请求以获取 HTML 内容。使用 BeautifulSoup 解析 HTML。提取标题、上映年份和评分等电影信息。将提取的信息存储或显示。
Python 网络爬虫：获取电影信息
如何使用 Python 爬虫提取电影信息？
利用 Python 进行网络爬虫是一个有效的自动化过程，可以通过编写代码从网站上抓取和提取数据。以下是如何使用 Python 爬虫获取电影信息的步骤：
1. 导入必要的库
立即学习“Python免费学习笔记（深入）”；
首先，导入以下 Python 库：
-
requests：用于发送 HTTP 请求 -
BeautifulSoup：用于从 HTML 中解析数据
import requests from bs4 import BeautifulSoup
2. 确定目标 URL
确定您要抓取电影信息的网站的 URL。例如，要从 IMDb 抓取信息，可以使用以下 URL：
Secure Python Code Sandbox
下载
安全 Python 代码沙箱：在隔离的沙箱中执行任意 Python 代码，预装 requests、NumPy、pandas 库。返回 stdout、stderr。
target_url = "https://www.imdb.com/search/title/?title_type=feature&release_date=2023"
3. 发送 HTTP 请求
使用 requests 库发送 HTTP GET 请求以获取目标 URL 的 HTML 内容：
response = requests.get(target_url)
4. 解析 HTML
使用 BeautifulSoup 从 HTML 内容中解析数据。您可以使用 find_all() 方法查找包含电影信息的元素：
soup = BeautifulSoup(response.text, "html.parser")
movies = soup.find_all("div", class_="lister-item mode-advanced")5. 提取电影信息
对于每个电影元素，您可以提取以下信息：
- 标题：
titles = [movie.find("h3", class_="lister-item-header").text for movie in movies] - 上映年份：
years = [movie.find("span", class_="lister-item-year text-muted unbold").text for movie in movies] - 评分：
ratings = [movie.find("div", class_="inline-block ratings-imdb-rating").text for movie in movies]
6. 存储或显示数据
您可以将提取的电影信息存储在列表或数据帧中，或立即显示：
for title, year, rating in zip(titles, years, ratings):
print(f"{title} ({year}) - {rating}") 
