大数据导论

第一章-大数据概述

1. 请阐述数据的基本类型

   • 数据类型包括文本，图片，音频，视频等

   • 数据组织形式包括五文件和数据库

2. 请阐述把数据变得可用需要经过那几个步骤

   • 数据清洗，数据管理，数据分析

3. 请阐述人类IT发展史上3次信息化浪潮的发生时间、标志及其解决的问题

   • 第一次：1980年前后，标志：个人计算机，解决问题：信息处理

   • 第二次：1995年前后，标志：互联网，解决问题：信息传输

   • 第三次：2010年前后，标志：互联网，云计算和大数据，解决问题：信息爆炸

4. 请阐述信息科技是如何为大数据时代的到来提供技术支撑的。

   • 存储设备容量不断增加

   • CPU处理能力大幅提升

   • 网络宽带不断增加

5. 请阐述人类社会的数据产生方式大致经历了哪3个阶段。

   • 运营式系统阶段

   • 用户原创内容阶段

   • 感知式系统阶段

6. 请阐述大数据发展的3个重要阶段。

   • 萌芽期：数据挖掘理论和数据库技术逐步成熟

   • 成熟期：web2.0

   • 大规模应用期：大数据应用渗透各行各业

7. 请阐述大数据的“4V”特性。

   • 4v：数据量大，数据类型繁多，处理速度快，价值密度低

8. 请阐述大数据对科学研究有什么影响。

   • 实验科学，理论科学，计算科学，数据密集型科学

9. 请举例说明大数据的应用。

   • 制造，金融，汽车，互联网，餐饮，电信，能源，物流，城市管理，生物医学，体育和娱乐，安全，个人生活

10. 请阐述高校大数据专业的知识体系。

    • 数据采集与预处理

    • 数据存储与管理

    • 数据处理与分析

    • 数据可视化

第二章-大数据与其他新兴科技的关系

1. 请阐述云计算的概念

   • 云计算实现通过网络提供可伸缩的，廉价的分布式计算能力，用户只需要在具备网络接入条件的地方，就可以随时随地获得所需的各种IT资源

2. 请阐述云计算有哪几种服务模式和哪几种类型。

   • 服务模式：基础设施即服务，平台即服务，软件即服务

   • 类型：公有云，私有云，混合云

3. 请阐述什么是数据中心和数据中心在云计算中的作用。

   • 数据中心是云计算的重要载体，为云计算提供计算，存储，宽带等各种资源，为各种平台和应用提供运行支撑环境

   • 数据中心里的CPU，内存，磁盘，宽带等it资源汇集成一个庞大的it资源池

4. 请举例说明云计算有哪些典型的应用。

   • 应用：电子政务，教育，企业，医疗

5. 请阐述物联网的概念和物联网各个层次的功能。

   • 物联网是物物相连的互联网，是互联网的延申，它利用局部网或互联网等技术把传感器，控制器，机器，人员或物等通过新的方式连在一起，形成人与物，物与物相连，实现信息化和远程管理控制

   • 四个层次：感知层，网络层，处理层，应用层

6. 请阐述物联网有哪些关键技术。

   • 识别感知技术

   • 网络与通信技术

   • 数据挖掘与融合技术

7. 请阐述大数据与云计算、物联网的相互关系。

   • 大数据技术为物联网数据分析提供支撑，物联网是大数据的重要来源

   • 物联网为云计算技术提供了广阔的应用空间，云计算为物联网提供海量数据存储能力

   • 云计算为大数据提供了技术基础，大数据为云计算提供用武之地

   • 大数据侧重于对海量数据存储，处理与分析，从海量数据中发现价值，服务于生产和生活；

   • 云计算旨在整合和优化各种it资源并通过网络以服务的方式，廉价低提供给用户

   • 物联网的发展目标是实现“物物相连”，应用创新是物联网发展的核心

8. 请阐述人工智能的概念。

   • 人工智能是研究，开发用于模拟，延申和扩展人的智能的理论，方法，技术及应用系统的一门新的技术科学

9. 请阐述人工智能有哪些关键技术。

   • 机器学习，知识图谱，自然语言处理

   • 人机交互，计算机视觉（人脸识别，图像检索，游戏和控制，监测，智能汽车），生物特征识别

   • AR/VR（虚拟现实/增强现实）

10. 请阐述人工智能与大数据的关系。

    • 联系：

    • 人工智能需要数据来建立其智能，特别是机器学习

    • 大数据技术为人工智能提供了强大的存储能力和计算能力

    • 区别：

    • 人工智能是一种计算形式，它允许计算机执行认知功能，大数据是一种传统计算，它不会根据结果采取行动，只是寻找结果

    • 二者要达成的目标和实现目标的手段不同，大数据的主要目的是通过数据的对比分析来掌握和推演更优的方案

    • 人工智能的开发是为了辅助或代替我们更快，更好地完成某些任务或进行某些决定

11. 请阐述区块链的概念以及区块链和比特币的关系。

    • 区块链是利用块链式数据结构来验证与存储数据，利用分布式节点共识算法来生成和更新数据，利用密码学的方式保证数据传输和访问安全的一种全新的分布式基础架构与计算范式

    • 关系：采用区块链（数据结构+哈希函数），保证账本不能篡改，采用数字签名技术，保证只有自己才能够使用自己的账号

    • 采用p2p网络和pow共识机制，保证去中心化的运作方式

12. 请阐述区块链是如何解决防篡改问题的。

    • 引入哈希函数，区块链

13. 请阐述区块链和大数据的关系。

    • 区别：

    • 数据量，结构化和非结构化，独立和整合

    • 直接和间接，CAP理论，基础网络

    • 价值来源，计算模式

    • 联系：

    • 区块链式使大数据极大降低信用成本

    • 区块链是构建大数据时代的信任基石

    • 区块链是促进大数据价值流通的管道

第三章-大数据基础知识

1. 请阐述传统的数据安全的威胁主要包括哪些

   • 计算机病毒

   • 黑客攻击

   • 数据信息存储介质的损坏

2. 请阐述大数据安全与传统数据安全的不同

   • 大数据成为网络攻击的显著目标

   • 大数据加大隐私泄露风险

   • 大数据技术被应用到攻击手段中

   • 大数据成为高级可持续攻击的载体

3. 请列举几个大数据安全问题的实列