爬虫学习01 什么是爬虫爬虫的分类_1.知道爬虫分类,和这些分类的功能,目的,和实现的手段

作者：笔触狂放9 | 2024-04-07 21:39:48

踩

1.知道爬虫分类,和这些分类的功能,目的,和实现的手段

1.什么是爬虫：

网络爬虫（又被称为网页蜘蛛，网页机器人），模拟客户端发送网络请求，接收请求响应，一种按照一定的规则，自动地抓取互联网信息的程序

浏览器能做的事情，原则上爬虫都能够做

2.爬虫的分类：

根据使用场景，网络爬虫可分为通用爬虫和聚焦爬虫两种.

通用网络爬虫是捜索引擎抓取系统（Baidu、Google、Yahoo等）的重要组成部分。主要目的是将互联网上的网页下载到本地，形成一个互联网内容的镜像备份。

通用网络爬虫从互联网中搜集网页，采集信息，这些网页信息用于为搜索引擎建立索引从而提供支持，它决定着整个引擎系统的内容是否丰富，信息是否即时，因此其性能的优劣直接影响着搜索引

声明：本文内容由网友自发贡献，不代表【wpsshop博客】立场，版权归原作者所有，本站不承担相应法律责任。如您发现有侵权的内容，请联系我们。转载请注明出处：https://www.wpsshop.cn/w/笔触狂放9/article/detail/380808

爬虫学习01 什么是爬虫 爬虫的分类_1.知道爬虫分类,和这些分类的功能,目的,和实现的手段