[已解决]爬虫selinum,for循环失效

白本羽

目标:自动遍历该网页下的题目,并提交,之后爬取正确答案,前面没有问题


我的代码:

1. from selenium import webdriver
   
2. from lxml import etree
   
3. import requests
   
4. import time
   
5. import random
   
6. import json
   
7. 
   
8. from selenium.webdriver.remote.webelement import WebElement
   
9. 
   
10. headers = {
    
11.     "user-agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) "
    
12.                   "Chrome/90.0.4430.93 Safari/537.36 Edg/90.0.818.56 "
    
13. }
    
14. browser = webdriver.Edge(executable_path = "MicrosoftWebDriver.exe")
    
15. # 让浏览器发起一个指定url的请求
    
16. browser.get("https://www.yooc.me/login")
    
17. # 定位标签
    
18. account_input = browser.find_element_by_xpath('/html/body/div[2]/div/div/div[2]/div/div[1]/form/div[2]/input')
    
19. account_input.send_keys('账号')
    
20. password_input = browser.find_element_by_xpath('/html/body/div[2]/div/div/div[2]/div/div[1]/form/div[3]/input')
    
21. password_input.send_keys('密码')
    
22. # 用page_source获取当前页面的源码数据
    
23. response = browser.page_source
    
24. tree = etree.HTML(response)
    
25. code_url = tree.xpath('/html/body/div[2]/div/div/div[2]/div/div[1]/form/div[4]/img/@src')[0]
    
26. text_response = requests.get(url = code_url, headers = headers).content
    
27. with open("./code_text.jpg", "wb") as fp:
    
28.     fp.write(text_response)
    
29.     code_text = input("请查看验证码,并在30秒内输入:")
    
30. 
    
31. code_text_input = browser.find_element_by_xpath('/html/body/div[2]/div/div/div[2]/div/div[1]/form/div[4]/input[1]')
    
32. # 与标签交互,输入文本
    
33. code_text_input.send_keys(code_text)
    
34. 
    
35. login = browser.find_element_by_id('submit')
    
36. login.click()
    
37. time.sleep(2)
    
38. 
    
39. topic_url = browser.find_element_by_xpath('/html/body/div[2]/div[2]/table/tbody/tr/td/div[1]/div[3]/div[1]/a[2]')
    
40. topic_url.click()
    
41. time.sleep(2)
    
42. 
    
43. handles = browser.window_handles
    
44. browser.switch_to.window(handles[1])
    
45. exam_url = browser.find_element_by_xpath('/html/body/section/section/div[1]/div[4]/a')
    
46. exam_url.click()
    
47. time.sleep(2)
    
48. 
    
49. exam_detail = browser.find_element_by_xpath('/html/body/section/section/div[2]/div[3]/ul/li[1]/div[2]/a[2]')
    
50. exam_detail.click()
    
51. time.sleep(2)
    
52. 
    
53. confirm_btn = browser.find_element_by_xpath('/html/body/div[12]/div[3]/div/div[1]')
    
54. confirm_btn.click()
    
55. time.sleep(5)
    
56. 
    
57. bodylist = browser.find_elements_by_xpath('/html/body/section/section/div[5]/div[@class=question-board]')
    
58. 
    
59. for each in bodylist: # 定位题目选项的标签并随机单击一个.此处整个循环不执行,也不报错,直接忽略了.
    
60.     print(each.text)
    
61.     templist = each.find_elements_by_tag_name('label')
    
62.     islist = random.choice(templist)
    
63.     islist.click()
    
64.     print("选项已勾选!")

复制代码

以下为页面选项的格式代码:
<div class="question-board" id="question-31960407">
            
            <p class="q-cnt crt">2、<span>[1分]</span> </p><p class="q-cnt crt">随着对外开放的进一步扩大，中共中央和国务院在1990年作出的战略举措是（ ）。</p><p></p><ol><li>
                    <input id="31960407_1_0" type="radio" name="31960407_1" value="0"><label for="31960407_1_0">A. 建立厦门经济特区</label>
                </li>

                <li>
                    <input id="31960407_1_1" type="radio" name="31960407_1" value="1"><label for="31960407_1_1">B. 建立珠海经济特区</label>
                </li>

                <li>
                    <input id="31960407_1_3" type="radio" name="31960407_1" value="3"><label for="31960407_1_3">C. 开发开放上海浦东</label>
                </li>

                <li>
                    <input id="31960407_1_2" type="radio" name="31960407_1" value="2"><label for="31960407_1_2">D. 开发、开放海南经济特区</label>
                </li></ol>
          </div>

最佳答案

月排行榜 / 总排行榜

suchocolate

2021-5-30 20:52:51

bodylist估计是个空。

跳转到最佳答案楼层

suchocolate

bodylist估计是个空。

白本羽

suchocolate 发表于 2021-5-30 20:52
bodylist估计是个空。

确实为空列表,是上面的xpath定位少了"",导致是空值,现在好了.