当前位置:   article > 正文

用python爬取网站小说,帮你们省下会费

用python爬取网站小说,帮你们省下会费

第一步:导库

  1. import requests
  2. from lxml import etree

第二步:请求头

  1. headers = {
  2. 'User-Agent': 'Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/77.0.3865.90 Safari/537.36',
  3. 'Referer': 'http://www.xbiquge.la/7/7931/',
  4. 'Cookie': '_abcde_qweasd=0; BAIDU_SSP_lcr=https://www.baidu.com/link?url=jUBgtRGIR19uAr-RE9YV9eHokjmGaII9Ivfp8FJIwV7&wd=&eqid=9ecb04b9000cdd69000000035dc3f80e; Hm_lvt_169609146ffe5972484b0957bd1b46d6=1573124137; _abcde_qweasd=0; bdshare_firstime=1573124137783; Hm_lpvt_169609146ffe5972484b0957bd1b46d6=1573125463',
  5. 'Accept-Encoding': 'gzip, deflate'
  6. }

请求头的内容获取:F12键进入开发者模式,步骤如下图所示(未出现网站信息刷新一下页面就可以了)

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/木道寻08/article/detail/825091
推荐阅读
相关标签
  

闽ICP备14008679号