[已解决]selenium问题求助！！

Lwq_Official

1. from selenium import webdriver
   
2. 
   
3. 
   
4. class Douyu(object):
   
5.     def __init__(self):
   
6.         self.url = 'https://www.douyu.com/directory/all'
   
7.         self.driver = webdriver.Chrome(executable_path='D:\chromedriver_win32\chromedriver.exe')
   
8. 
   
9.     def run(self):
   
10.         # url
    
11.         # driver
    
12.         # get
    
13.         self.driver.get(self.url)
    
14.         # parse
    
15.         self.parse_data()
    
16.         # save
    
17.         # next_page
    
18. 
    
19.     def parse_data(self):
    
20.         room_list = self.driver.find_elements_by_xpath('//*[@id="listAll"]/section[2]/div[2]/ul/li/div')
    
21.         # print(room_list)
    
22.         # js = 'scrollTo(0,1000)'  # 将滚动条向下滚动
    
23.         # 遍历房间列表，从每一个房间结点获取数据
    
24.         for room in room_list:
    
25.             # title = room.find_element_by_class_name("DyListCover-userName").text
    
26.             # self.driver.execute_script(js)  # 执行JS代码
    
27.             temp = {'title': room.find_element_by_xpath('./a[1]/div[2]/div[1]/h3').text,
    
28.                     'type': room.find_element_by_xpath('./a[1]/div[2]/div[1]/span').text,
    
29.                     'owner': room.find_element_by_xpath('./a[1]/div[2]/div[2]/h2/div').text,
    
30.                     'number': room.find_element_by_xpath('./a[1]/div[2]/div[2]/span').text}
    
31.             print(temp)
    
32. 
    
33. 
    
34. if __name__ == '__main__':
    
35.     douyu = Douyu()
    
36.     douyu.run()
    

复制代码

这段代码打印出来的temp会报错，请问应该怎么解决？？

最佳答案

月排行榜 / 总排行榜

fall_bernana

2020-10-27 12:21:28

975050208@qq.co 发表于 2020-10-27 08:14

1. def parse_data(self):
   
2.         room_list = self.driver.find_elements_by_xpath("//div[@class='layout-Module-container layout-Cover ListContent']")
   
3.         for room in room_list:
   
4.             roomlist=room.text.split('\n')
   
5.             print(roomlist)

复制代码

报错是由于find_elements_by_xpath后页面元素有变化。你根据之前获取的WebElement的ID去获取会找不到。你这个可以一次获取然后4个一组就能获取到了

跳转到最佳答案楼层

Lwq_Official

好像是没设置等待时间，页面没加载完。加了等待时间加可以了。。。

hrp

鱼币

604858912

你这头像不敢看啊

鱼的七秒记忆

鱼七记忆

疾风怪盗

回帖奖励？

一抹心尘

Lwq_Official 发表于 2020-10-25 16:22
好像是没设置等待时间，页面没加载完。加了等待时间加可以了。。。

是已经解决了吗？楼主

一秋秋s

你这是你现在用的chrome浏览器和你所用的webdriver版本不匹配导致的，重新下一个就行

心驰神往

没用过

象棋爱好者

我有点没看懂

975050208@qq.co

fall_bernana

975050208@qq.co 发表于 2020-10-27 08:14

1. def parse_data(self):
   
2.         room_list = self.driver.find_elements_by_xpath("//div[@class='layout-Module-container layout-Cover ListContent']")
   
3.         for room in room_list:
   
4.             roomlist=room.text.split('\n')
   
5.             print(roomlist)

复制代码

报错是由于find_elements_by_xpath后页面元素有变化。你根据之前获取的WebElement的ID去获取会找不到。你这个可以一次获取然后4个一组就能获取到了

Ray-先生