关于chrome浏览器滚动条滚动问题

爱吃大土豆

最近在做爬虫时遇到了浏览器的滚动加载问题，我利用chrome按照网上的方法控制网页滚动，但是无论什么方法都不能让滚动条滚动，由于网页是异步加载的，也就导致无法获得漫画图片的地址
所以想请教以下我的代码应该怎么修改呢？
网址：https://ac.qq.com/ComicView/index/id/635294/cid/1

塔利班

selenium

js="var q=document.getElementById('id').scrollTop=10000"
driver.execute_script(js）
或：

js="var q=document.documentElement.scrollTop=10000"
driver.execute_script(js)

爱吃大土豆

塔利班 发表于 2018-12-26 08:12
selenium

js="var q=document.getElementById('id').scrollTop=10000"

用第一种方法报错返回的  raise exception_class(message, screen, stacktrace)
selenium.common.exceptions.WebDriverException: Message: unknown error: Cannot set property 'scrollTop' of null
第二种方法不报错，但是没有反应  

爱吃大土豆

塔利班 发表于 2018-12-26 08:12
selenium

js="var q=document.getElementById('id').scrollTop=10000"

这是源代码
import os
import re
import requests
from tkinter import *
from lxml import etree
import time
# 导入chrome无头浏览器
from selenium import webdriver
#from selenium.webdriver.chrome.options import Options

def url_key(url):                    #这里把最大章节的网址传了进来，进行网页规则分析
    #chrome_options = Options()
    #chrome_options.add_argument("--headless")
    driver = webdriver.Chrome() #chrome_options=chrome_options)
   
    driver.get(url)
    time.sleep(2)
    #滚动条滚动
    for i in range(1, 2):
        js = "var q=document.documentElement.scrollTop=10000"
        driver.execute_script(js)
        
        ###########注释中的这几种命令我都试过了，都无法让滚动条滚动####################
        #print(document.body.scrollTop)
        #print(window.pageYOffset.scrolltop)
        #print(document.documentElement.scrollTop)
        #driver.implicitly_wait()
        time.sleep(1)
        
    webpage = driver.page_source  #获取页面资源
    #driver.close()
    return webpage  # 返回最新一章的页面内容，用作查看url规则

urlchapter = 'https://ac.qq.com/ComicView/index/id/635294/cid/1'
htmls = url_key(urlchapter)  # 利用最新章节网页进行规则分析
html = etree.HTML(htmls)  #etree解析网页
img_url = html.xpath('//@src')
print(img_url)