解决Python selenium get页面很慢时的问题
作者：支持中文丶英文丶数字丨 发布时间：2022-08-29 02:08:22
标签：Python,selenium,get
driver.get（"url")等到页面全部加载渲染完成后才会执行后续的脚本。
在执行脚本时，driver.get("url") ，如果当前的url页面内容较多加载特别慢，很费时间，但是我们需要操作的元素已经加载出来，可以将页面加载停掉，不影响后面的脚本执行，解决办法
设置页面加载timeout，get操作： try get except 脚本window.stop(), 使用GeckoDriver上有效果，
但是在ChromeDriver上还是会有问题，抛出异常timeout后续脚本不会继续执行
GeckoDriver执行具体如下：
访问百度贴吧某个获取其帖子总页数：
可以通过两种方式获取，简单的就是直接定位元素共11页
代码用定位尾页获取总页数
from selenium import webdriver
import re
driver = webdriver.Firefox()
#设定页面加载timeout时长，需要的元素能加载出来就行
driver.set_page_load_timeout(20)
driver.set_script_timeout(20)
#try去get
try:
driver.get("http://tieba.baidu.com/p/5659969529?red_tag=w0852861182")
except:
print("加载页面太慢，停止加载，继续下一步操作")
driver.execute_script("window.stop()")
last_page_element = driver.find_element_by_css_selector("li.l_pager.pager_theme_4.pb_list_pager >a:nth-child(12)") #定位到元素尾页元素
#获取尾页页码链接文本
text = last_page_element.get_attribute("href")
all_page_num = re.search("\d+$",text).group() # 正则匹配到页码
print("当前贴吧贴子总页数为:％s"％all_page_num)
来源：https://blog.csdn.net/dance117/article/details/80912489
0
投稿猜你喜欢
- Vue实践分享（三）在实际项目的开发过程中，经常会遇到页面还没渲染完成而插件就已经开始加载的问题，这样就会导致显示和功能出错。可以通过Vue
- 将表数据生成SQL脚本的存储过程示例：CREATE PROCEDURE dbo.UspOutputData @tablename sysna
- 简介bisect 库是 Python 标准库中的一部分，它提供了二分查找的功能。二分查找是一种在有序列表中查找某一特定元素的搜索算法。它的时
当孔乙己说回字有四样写法的时候，相信各位都是这样的表情吧？但是，如果孔乙己说NumPy数组有四种乘法的时候，各位大约就是这样的表情了吧？实际- 我就废话不多说了，大家还是直接看代码吧~<template><uploader :options="option
- MySQL 8 正式版 8.0.11 已发布，官方表示 MySQL 8 要比 MySQL 5.7 快 2 倍，还带来了大量的改进和更快的性能
- JOSN字符串转换为自定义类实例对象有时候我们有这种需求就是把一个JSON字符串转换为一个具体的Python类的实例，比如你接收到这样一个J
- 所谓网页抓取，就是把URL地址中指定的网络资源从网络流中读取出来，保存到本地。 在Python中有很多库可以用来抓取网页，我们先学习urll
- 定义一个banner.js文件，代码如下;window.requestAnimationFrame = window.requestAnim
- python语言的一大优势：为科学计算提供了大量的支持功能，math模块提供了很多数学计算函数。math模块定义了一些数学模块，这个模块属于
- seek()方法在偏移设定该文件的当前位置。参数是可选的，默认为0，这意味着绝对的文件定位，它的值如果是1，这意味着寻求相对于当
- radians()方法把角度转化为弧度角x。语法以下是radians()方法的语法：radians(x)注意：此函数是无法直接访
- 全局事件总线，是组件间的一种通信方式，适用于任何组件间通信。看下面具体的例子。父组件：App<template>
- 这篇文章主要介绍了python ftplib模块使用代码实例,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需
- 1.0 创建存储过程和函数创建存储过程和函数就是将经常使用的一组 SQL 语句组合在一起，并将这些 SQL 语句当作一个整体存储
- 代码： (使用os.listdir) import osdef ListFilesToTxt(dir,file,wildcard,recur
- 启动mysql服务（以管理员身份运行cmd）net start mysql连接mysqlmysql -u root -p常用命令Databa
- 一、安装selenium打开命令控制符输入：pip install -U selenium火狐浏览器安装firebug：www.firebu
- tkinter库Canvas操作三个实例实例一：涂鸦import tkinter as tkimport pyautogui as agfr
- python中支持SSH协议的模块主要有Paramiko和netmiko两种，本次实验采用netmiko模块。netmikko模块为pyth
