爬取知乎壁纸：selenium模拟登陆获取cookies，再将cookies传递给requests_selenium获取cookie,request发送post

作者：小丑西瓜9 | 2024-05-22 12:45:58

踩

selenium获取cookie,request发送post

selenium很好用，但是爬取大量数据时速度较慢。
通过selenium模拟登陆，获取cookies，再将cookies传递给requests，通过requests爬取加快速度。
以为知乎网爬取壁纸为例，代码如下：

from selenium import webdriver
import requests
from lxml import etree
import time
import os

#使用selenium通过扫码模拟登陆知乎，获取cookies
post_url = 'https://www.zhihu.com/signin?next=%2F'
driver = webdriver.Chrome()
driver.get(post_url)
time.sleep(10)
post_cookies = driver.get_cookies1
2
3
4
5
6
7
8
9
10
11

声明：本文内容由网友自发贡献，不代表【wpsshop博客】立场，版权归原作者所有，本站不承担相应法律责任。如您发现有侵权的内容，请联系我们。转载请注明出处：https://www.wpsshop.cn/w/小丑西瓜9/article/detail/608338