当前位置:   article > 正文

使用selenium和python,实现静态、多级、动态网页的信息爬取_python+selenium+edge爬取数据‘’

python+selenium+edge爬取数据‘’

前言

其中的过程适用于静态网页(豆瓣电影信息、哔哩哔哩评论区等)、动态页面(百度图片滚轮触发页面更新、下拉框触发页面更

新等url不变但通过鼠标互动,致使信息更新等场景)的信息爬取。

基本适用于所有网页信息的爬取,但代码不够简洁,下述流程不够详细。

在这里插入图片描述

1 Selenium安装

Python学习交流Q群:906715085####1)pip install selenium

(2)以edge为例,安装驱动。url:https://developer.microsoft.com/en-us/microsoft
  • 1
  • 2
  • 3
声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/很楠不爱3/article/detail/489061
推荐阅读
相关标签
  

闽ICP备14008679号