free
使用 Selenium 的 driver.get 打开网页慢
  • 首页 > 技术 > Python
  • 作者:free
  • 2022年7月13日 15:17 星期三
  • 浏览:1161
  • 字号:
  • 评论:0
  • 目标:保证网页在加载完所需要元素后即停止。


    pageLoadStrategy 设置


    对于一个新加载的 dom ,页面啥时候开始接受命令由页面的加载策略决定,也就是说,我们通过修改页面加载策略,可以使页面即使处于加载中,也能接受我们的命令,从这点可以解决 webdriver.get 的阻塞问题。而每类 webdriver 都有一个对应的配置文件放在特定的类 DesiredCapabilities 里面,通过修改里面的 pageLoadStrategy ,可以使 webdriver 的页面加载策略发生改变。


    from selenium import webdriver
    from selenium.webdriver.common.desired_capabilities import DesiredCapabilities
    from selenium.webdriver.support.ui import WebDriverWait
    
    desired_capabilities = DesiredCapabilities.CHROME  # 修改页面加载策略
    desired_capabilities["pageLoadStrategy"] = "none"  # 注释这两行会导致最后输出结果的延迟,即等待页面加载完成再输出
    
    driver = webdriver.Chrome('browsers/chromedriver.exe')
    wait = WebDriverWait(driver, 10)  #后面可以使用wait对特定元素进行等待
    
    driver.get('http://qzone.qq.com/')
    # some code to work.
    print("Reach end.")


    上面我们可以看到,将页面加载策略修改为 none 之后,页面即使在加载过程中,程序也可以继续执行。


    代码中的 pageLoadStrategy 属性可以设置为以下三种属性:


    属性:详细描述

    eager: 即正常情况下,selenium会等待整个界面加载完成(指对html和子资源的下载与解析,不包括ajax)

    normal: 要等待整个dom树加载完成,即DOMContentLoaded这个事件完成,仅对html的内容进行下载解析none: 当html下载完成之后,不等待解析完成,selenium会直接返回


    上面的代码用了最后一种解析方式——none,不作等待,直接返回,

    然后在后面的代码中可以用 explicit_wait 或者 implicit_wait 等方式来对特定元素进行等待捕捉。


      您阅读这篇文章共花了:  
     本文无需标签!
    二维码加载中...
    本文作者:free      文章标题: 使用 Selenium 的 driver.get 打开网页慢
    本文地址:https://renchuanchuan.com/?post=21
    版权声明:若无注明,本文皆为“RCC”原创,转载请保留文章出处。