大数据项目实战之数据采集_大数据采集实践

数据源分类

数据日志采集、网络数据采集、数据库采集

HTTP请求过程

常见的请求方法分为两种：GET请求和POST请求。

GET请求：常用于获取数据   明文发送数据【地址中可见的参数】不安全

请求地址的URL链接

HTTP请求头是指在超文本传输协议的请求消息中协议头部分的组件。可查看教材了解请求头详细介绍。

请求体通常出现在POST请求中，用于存放POST请求中的表单数据，而对于GET请求而言，请求体为空。

HTTP响应代码表示服务器返回给客户端的响应状态，例如常见的响应代码200代表服务器正常响应，404代表页面未找到等等。

响应头包含了服务器对客户端请求的应答信息，如Content-Type、Server、Set-Cookie等。可查看教材了解响应头详细介绍。