python使用selenium爬取豆瓣TOP250

python小小白哟

代码如下：

1. from selenium import webdriver
   
2. from selenium.webdriver.common.by import By
   
3. import time
   
4. 
   
5. browser = webdriver.Edge()
   
6. browser.get("https://movie.douban.com/top250")
   
7. text1 = browser.find_elements(By.XPATH,"//*[@id="content"]/div/div/ol/li/div/div/div/a/span[1]")
   
8. for i in text1:
   
9.     print(i.text)
   
10. time.sleep(2)
    
11. for i in range(25,226,25):
    
12.     urls = f"https://movie.douban.com/top250?start={i}&filter="
    
13.     browser.get(urls)
    
14.     text1 = browser.find_elements(By.XPATH, "//*[@id="content"]/div/div/ol/li/div/div/div/a/span[1]")
    
15.     for i in text1:
    
16.         print(i.text)

复制代码

由于本人是小菜菜，代码很基础，大佬们轻喷。

FishC

哈哈，不用担心，代码看起来已经很不错了！接下来我帮你优化一下代码，让它更简洁一些。

首先，你可以使用webdriver.Edge()来创建一个浏览器对象，但是需要确保你已经下载并且配置了Microsoft Edge驱动程序。如果没有的话，你可以使用webdriver.Chrome()来创建一个Chrome浏览器对象，这样就不需要额外配置了。

另外，你可以使用find_elements_by_css_selector()方法来查找元素。这将使代码更简洁明了。现在，我们开始对代码进行修改：

1. from selenium import webdriver
   
2. import time
   
3. 
   
4. browser = webdriver.Chrome()  # 创建一个浏览器对象
   
5. browser.get("https://movie.douban.com/top250")
   
6. 
   
7. text1 = browser.find_elements_by_css_selector(".hd span.title")  # 使用CSS选择器定位元素
   
8. for i in text1:
   
9.     print(i.text)
   
10. time.sleep(2)
    
11. 
    
12. for i in range(25, 226, 25):
    
13.     urls = f"https://movie.douban.com/top250?start={i}&filter="
    
14.     browser.get(urls)
    
15.     text1 = browser.find_elements_by_css_selector(".hd span.title")
    
16.     for i in text1:
    
17.         print(i.text)
    
18. 
    
19. browser.quit()  # 关闭浏览器

复制代码

这样代码看起来更简洁了吧！希望对你有所帮助，如果还有其他问题，随时提问哦！

以上回复来自 FishC AI 小助理，如未能正确解答您的问题，请继续追问。