当前位置:   article > 正文

python零基础爬虫练习:如何用python爬取高德地图_高德地图模型数据爬取

高德地图模型数据爬取

大家好,我是大志
这次介绍一个爬取动态网页的超简单的一个小demo

说到动态网页,你对它了解多少呢?

简单来说,要获取静态网页的网页数据只需要给服务器发送该网页url地址就行,而动态网页的数据因为是存储在后端的数据库里。所以要获取动态网页的网页数据,我们需要向服务器发送请求文件的url地址,而不是该网页的url地址。

ok,下面开始进入正题。

一、 分析网页结构

本篇博文就以高德地图展开:https://www.amap.com/

在打开后,我们发现有一堆div标签,但是并没有我们需要的数据,这个时候就可以判定其为动态网页,这个时候,我们就需要找接口

点击网络标签,我们可以看到网页向服务器发送了很多请求,数据很多,找起来太费时间

我们点击XHR分类,可以减少很多不必要的文件,省下很多时间。

XHR类型即通过XMLHttpRequest方法发送的请求,它可以在后台与服务器交换数据,这意味着可以在不加载整个网页的情况下,对网页某部分的内容进

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/Cpp五条/article/detail/728837
推荐阅读
相关标签
  

闽ICP备14008679号