selenium篇之性能优化_selenium性能

当我们使用selenium制作爬虫或自动化测试时，往往会消耗更大的资源以及多余的等待页面资源加载时间。
基于我上一篇帖子的实际需求，当网页图片过多且不需要完全都将图片加载时，应该停止网页的加载进行下一步操作，这里给出三种可供参考的优化方案。

1. 设置页面的最大加载时长

browser = webdriver.Chrome() # 打开浏览器
browser.set_page_load_timeout(10) #设置页面加载超时时长
1
2

2. 禁止页面加载图片

chrome_opt = webdriver.ChromeOptions()
prefs = {"profile.managed_default_content_settings.images": 2}
chrome_opt.add_experimental_option("prefs", prefs)
driver = webdriver.Chrome(chrome_options=chrome_opt)
1
2
3
4

3. 对于部分懒加载页面，通过执行JS代码，将页面滑动到最底端或感兴趣的元素位置，保证元素已经进行加载，详情可参考这篇博文