赞
踩
学习有效期:永久观看
学习时长:567分钟
学习计划:10天
难度:低
技术总监
讲师介绍:软件架构师,大数据培训讲师。拥有顶尖公司百度、阿里的多年工作经验。精通大数据开发、javaweb网站建设、信息系统项目建设等。著有书籍《Hadoop大数据技术开发实战》《Spark大数据分析实战》。
2020最新课程,从安装CentOS操作系统到搭建Hadoop2.x集群,结合实际案例一步一步讲解,带你零基础入门。
本套课程包含Hadoop2.x和Spark2.4.0的主要核心知识点,HDFS、MapReduce、Spark RDD Shell与API操作等。
第1章:CentOS7操作系统安装 |
1.VMWare新建虚拟机 |
2.CentOS7操作系统安装 |
第2章:大数据开发整体架构 |
1.大数据开发整体架构 |
2.Hadoop简介 |
第3章:集群环境配置 |
1.关闭防火墙 |
2.设置固定IP |
3.修改主机名 |
4.安装JDK |
5.克隆虚拟机 |
6.修改克隆后主机名和IP |
7.配置主机名IP映射 |
第4章:Hadoop2.X集群搭建 |
1.配置SSH无密钥登录 |
2.Hadoop2.X集群搭建(1) |
3.Hadoop2.X集群搭建(2) |
第5章:HDFS |
1.HDFS存储架构 |
2.HDFS主要组件 |
3.HDFS文件操作基本命令 |
4.Eclipse关联Maven |
5.HDFS JavaAPI |
第6章:MapReduce |
1.MapReduce设计原理 |
2.示例:MapReduce单词计数演示 |
3.示例:MapReduce求平均分 |
第7章:Scala |
1.Scala语言基础(1) |
2.Scala语言基础(2) |
第8章:Spark |
1.Spark基本概念 |
2.Spark集群搭建 |
3.Spark Standalone模式架构 |
4.Spark Shell使用 |
5.示例:Spark Shell单词计数 |
6.Spark RDD分区 |
7.RDD常用转换算子 |
8.RDD常用行动算子 |
9.RDD的血缘关系 |
10.RDD Stage划分 |
11.示例:Spark RDD单词计数(流程分析) |
12.示例:Spark RDD单词计数(代码编写) |
13.示例:Spark RDD求平均成绩 |
技术专家系统讲解传授编程思路与实战。
专属社群随时沟通与讲师答疑,扫清学习障碍,自学编程不再难。
超实用资料,覆盖核心知识,关键编程技能,方便练习巩固。(部分讲师考虑到版权问题,暂未上传附件,敬请谅解)
企业常见开发实战案例,带你掌握Python在工作中的不同运用场景。
2019Python开发者大会视频免费观看,送你一个近距离感受互联网大佬的机会。
满足不同场景,开发编程语言系统学习需求,不受空间、地域限制。
【完善的技术体系】
技术成长循序渐进,帮助用户轻松掌握
掌握Hadoop知识,扎实编码能力
【清晰的课程脉络】
浓缩大牛多年经验,全方位构建出系统化的技术知识脉络,同时注重实战操作。
【仿佛在大厂实习般的课程设计】
课程内容全面提升技术能力,系统学习大厂技术方法论,可复用在日后工作中。
掌握CentOS操作系统、Hadoop集群、Spark集群的搭建
掌握HDFS、MapReduce、Spark的核心组成、原理
学会编写MapReduce、Spark RDD应用程序
掌握Spark集群搭建、使用Spark RDD进行数据分析
Copyright © 2003-2013 www.wpsshop.cn 版权所有,并保留所有权利。