selenium查找网页如何处理网站资源一直加载失败的情况
selenium获取一个网页,某个网页的资源卡了很久还没有加载成功,如何放弃这个卡的数据,继续往下走
有2钟方式。通常可以采用下面的方式一来处理这种情况
方式一、WebDriverWait
这种方式对于资源比较多比较复杂的网页比较合适,比如有些图片在国外,一直加载不出来。mail.com就是这样
当网页15秒还没有加载完成,此时代码不管有没有找到元素都会继续往下走
,:
- 如果没有找到元素就会抛异常。
- 如果找到元素,就会点击
这个时候,如果抛异常。可以多尝试即便,直到不抛异常即可继续往下走
def ClickElementByXpat服务器托管网h(self, brower, xPath):
try:
brower.implicitly_wait(5)
self.insert_text_to_last_line(self.log_pass_file, xPath)
result = WebDriverWait(brower, 15).until(EC.presence_of_element_located((By.XPATH, xPath)))
result.click()
return True
except Exception as e:
print('exception timeout!!!')
return False
方式二、find_element
这种方式适合资源能快速加载完成的网站。
find_element会等到网站所有的资源全部加载完成后,再继续往下执行,这样的话更稳定,但对于有些网站资源本身很卡,就会一直卡住了,导致卡非常久,最后脚本运行失败。
def ClickElementByXpath(self, brower, xPath):
try:
brower.implicitly_wait(55)
self.insert_text_to_last_line(self.log_pass_file, xPath)
#element_input = brower.find_element_by_xpath(xPath)
element_input = brower.find_element(By.XPATH, xPath)
element_input.click()
return True
except Exception as e:
print('exception timeout!!!')
return False
是否可以设置超时时间 当元素的点击后 ,不等页面加载完成,接着往下走
在Selenium中,可以使用Web服务器托管网Driver
的set_page_load_timeout
方法来设置页面加载的超时时间,但是这个设置通常是应用于整个页面的加载,而不是单个元素的点击操作。如果你希望在点击元素后不等待页面加载完成,而是继续执行后续操作,可以采取以下方法:
使用set_page_load_timeout
:你可以设置一个较短的页面加载超时时间,以便在点击元素后等待较短的时间。然后,可以在捕获超时异常后,继续执行后续操作。
from selenium import webdriver
from selenium.common.exceptions import TimeoutException
# 创建 WebDriver 实例
driver = webdriver.Chrome()
# 设置页面加载超时时间为5秒
driver.set_page_load_timeout(5)
try:
# 打开网页
driver.get("https://example.com")
# 找到要点击的元素
element = driver.find_element_by_id("my_element_id")
# 点击元素
element.click()
except TimeoutException:
print("页面加载超时")
# 在这里可以继续执行后续操作,而不用等待页面加载完成
# 关闭 WebDriver
driver.quit()
服务器托管,北京服务器托管,服务器租用 http://www.fwqtg.net
相关推荐: fastposter v2.15.0 从繁琐到简单,简洁好用的海报生成器
fastposter v2.15.0 从繁琐到简单,简洁好用的海报生成器 从繁琐到简单,简洁好用的海报生成器 我很高兴向大家推荐一款令人兴奋的工具——Fastposter海报生成器。作为一名开发者,我们深知在项目中创建专业级海报的重要性,但常常面临时间和设计技…