当前位置:   article > 正文

爬虫之旅(二):爬取b站搜索数据_python b站获取搜索列表

python b站获取搜索列表

一、代码

  1. #UA伪装:让爬虫对应的请求载体身份标识伪装成某一款浏览器
  2. #UA检测是否为正常服务器请求
  3. import requests
  4. headers={'User-Agent':
  5. 'Mozilla/5.0 (Windows NT 10.0; Win64; x64; rv:92.0) Gecko/20100101 Firefox/92.0'
  6. }
  7. url='https://www.bilibili.com/all'
  8. #处理url携带的参数:封装到字典里
  9. kw=input('enter a word:')
  10. #参数
  11. param={
  12. 'keyword':kw
  13. }
  14. #对指定url发起的请求对应的url是携带参数的,并且在此过程中处理了参数
  15. response=requests.get(url=url,params=param,headers=headers)
  16. page_text=response.text
  17. fileName =kw+'html'
  18. with open(fileName,'w',encoding='utf-8')as fp:
  19. fp.write(page_text)
  20. print(fileName,'保存成功')

二、显示结果

 

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/小丑西瓜9/article/detail/696870
推荐阅读
相关标签
  

闽ICP备14008679号