[已解决]playwright的inner-text遇到script 就退出了，怎么解决呢？

blackantt

playwright的page.inner-text遇到script 就退出了，怎么解决呢？ 难道只能用正则解析吗？

最佳答案

月排行榜 / 总排行榜

isdkz

2023-3-10 14:44:03

blackantt 发表于 2023-3-10 14:06

那个不是因为遇到 script 才结束的，而是没有完全加载出来，

你等待一下就好

修改代码：

import sys
import os


from playwright.sync_api import sync_playwright
from playwright.sync_api import expect
import time
import datetime


link_zaojv = 'https://zaojv.com/'

with sync_playwright() as p:
    #browser = p.chromium.launch(headless=False)
    browser = p.chromium.launch(headless=True)
    context = browser.new_context()


    #page.set_viewport_size({"width": 1920, "height": 1080})
    page1 = context.new_page()
    

    page1.goto(link_zaojv, timeout=0)
    story_title = '打草惊蛇'
    page1.locator('//html/body/div/div[1]/table/tbody/tr/td[2]/form/input[5]').fill(story_title)
    page1.locator('//html/body/div/div[1]/table/tbody/tr/td[2]/form/input[6]').click()
    #print(page1.content())
    example_raw = page1.content()

    time.sleep(0.2)                   # 等待一下
    story_title_example = page1.inner_text('//*[@id="student"]')
    
    print(story_title_example)




    page1.close()
    context.close()
    browser.close()

跳转到最佳答案楼层

isdkz

遇到script 就退出是啥意思？

blackantt

isdkz 发表于 2023-3-10 12:18
遇到script 就退出是啥意思？

按上图，正常应该从1取到7，取到7个句子。  但碰到右图的 <script> 标签后，只取到了句子1-5，然后取到了script内的字符内容后，就结束了。

isdkz

blackantt 发表于 2023-3-10 13:44
按上图，正常应该从1取到7，取到7个句子。  但碰到右图的  标签后，只取到了句子1-5，然后取到了script ...

方便把相关代码放出来吗？

blackantt

isdkz 发表于 2023-3-10 13:58
方便把相关代码放出来吗？

import sys
import os


from playwright.sync_api import sync_playwright
from playwright.sync_api import expect
import time
import datetime


link_zaojv = 'https://zaojv.com/'

with sync_playwright() as p:
    #browser = p.chromium.launch(headless=False)
    browser = p.chromium.launch(headless=True)
    context = browser.new_context()


    #page.set_viewport_size({"width": 1920, "height": 1080})
    page1 = context.new_page()
    

    page1.goto(link_zaojv, timeout=0)
    story_title = '打草惊蛇'
    page1.locator('//html/body/div/div[1]/table/tbody/tr/td[2]/form/input[5]').fill(story_title)
    page1.locator('//html/body/div/div[1]/table/tbody/tr/td[2]/form/input[6]').click()
    #print(page1.content())
    example_raw = page1.content()


    story_title_example = page1.inner_text('//*[@id="student"]')
    
    print(story_title_example)




    page1.close()
    context.close()
    browser.close()

isdkz

blackantt 发表于 2023-3-10 14:06

那个不是因为遇到 script 才结束的，而是没有完全加载出来，

你等待一下就好

修改代码：

import sys
import os


from playwright.sync_api import sync_playwright
from playwright.sync_api import expect
import time
import datetime


link_zaojv = 'https://zaojv.com/'

with sync_playwright() as p:
    #browser = p.chromium.launch(headless=False)
    browser = p.chromium.launch(headless=True)
    context = browser.new_context()


    #page.set_viewport_size({"width": 1920, "height": 1080})
    page1 = context.new_page()
    

    page1.goto(link_zaojv, timeout=0)
    story_title = '打草惊蛇'
    page1.locator('//html/body/div/div[1]/table/tbody/tr/td[2]/form/input[5]').fill(story_title)
    page1.locator('//html/body/div/div[1]/table/tbody/tr/td[2]/form/input[6]').click()
    #print(page1.content())
    example_raw = page1.content()

    time.sleep(0.2)                   # 等待一下
    story_title_example = page1.inner_text('//*[@id="student"]')
    
    print(story_title_example)




    page1.close()
    context.close()
    browser.close()

blackantt

isdkz 发表于 2023-3-10 14:44
那个不是因为遇到 script 才结束的，而是没有完全加载出来，

你等待一下就好

好厉害。 我加个10就好了。

isdkz

blackantt 发表于 2023-3-10 15:14
好厉害。 我加个10就好了。

10也太久了吧，等个零点几秒就好

cflying

本身就有等待方法的嘛

blackantt

isdkz 发表于 2023-3-10 15:15
10也太久了吧，等个零点几秒就好

也许我网不行吧， 0.2 还不行。  干脆多一点。再不行就timeout=0

blackantt

cflying 发表于 2023-3-10 16:05
本身就有等待方法的嘛

照理说，它会自动判断，自动等待。  不过很多时候不好用