|
发表于 2023-7-12 16:25:49
|
显示全部楼层
根据你提供的代码,你想从电影网页中提取出每个电影的导演、主演、国家和类别信息。
首先,你可以使用 BeautifulSoup 解析 HTML 页面,然后使用 CSS 选择器来定位需要的元素。在这个例子中,你已经成功地从每个电影代表的 li 标签中提取了 author(导演和主演)信息。
接下来,你可以继续使用正则表达式来提取导演和主演的具体信息。正则表达式可以帮助你匹配和提取符合特定模式的字符串。
以下是修改后的代码示例,演示如何使用正则表达式提取导演和主演的姓名:
- import re
- import requests
- import logging
- from bs4 import BeautifulSoup
- logging.basicConfig(level=logging.INFO, format='%(asctime)s - %(levelname)s: %(message)s')
- index_url = 'https://movie.douban.com/top250?start=0&filter='
- header = {"User-Agent": "Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/108.0.0.0 Safari/537.36"}
- response = requests.get(url=index_url, headers=header).text
- soup = BeautifulSoup(response, 'lxml')
- # 取出每一个电影代表的li标签
- li_list = soup.select('.article .grid_view li')
- for li in li_list:
- author = li.select('.bd p')[0].get_text().strip()
-
- # 提取导演和主演的姓名
- director_pattern = r'导演: (.*?) '
- actor_pattern = r'主演: (.*?) '
-
- director = re.search(director_pattern, author)
- actor = re.search(actor_pattern, author)
-
- if director:
- director_name = director.group(1)
- print("导演:", director_name)
-
- if actor:
- actor_name = actor.group(1)
- print("主演:", actor_name)
复制代码
在这个示例中,我们使用了正则表达式模式 导演: (.*?) 和 主演: (.*?) 来匹配导演和主演的姓名,并提取出相应的信息。然后,我们使用 group(1) 来获取第一个捕获组的内容,即导演和主演的姓名。
你可以根据需要继续扩展代码,提取其他信息,如国家和类别,使用类似的方式应该也可以实现。 |
|