day4 学习python爬虫——接口与常见反爬_爬虫接口是什么

作者：天景科技苑 | 2024-08-20 03:00:37

踩

爬虫接口是什么

day4 学习python爬虫——接口与常见反爬

一、获取数据接口

例如：获取英雄联盟英雄人物名称

import requests
import os
1
2

response = requests.get('https://game.gtimg.cn/images/lol/act/img/js/heroList/hero_list.js')
for x in response.json()['hero']:
    print(x['name'], x['title'], x['goldPrice'])
1
2
3

二、requestes自动登录

例如获取cookie自动登录知乎网站

import requests

headers = {
    'cookie': 'xxxx'
}
response = requests.get('https://www.zhihu.com/', headers=headers)
print(response.text)
1
2
3
4
5
6
7

三、selenium自动登录

1.selenium获取cookie

from selenium.webdriver import Chrome
1

1.）用selenium打开需要获取cookie的网站

b = Chrome()
b.get('https://1

声明：本文内容由网友自发贡献，不代表【wpsshop博客】立场，版权归原作者所有，本站不承担相应法律责任。如您发现有侵权的内容，请联系我们。转载请注明出处：https://www.wpsshop.cn/w/天景科技苑/article/detail/1004860