Hadoop大数据基础课程

Hadoop大数据基础课程


北京北京大数据分析师培训
  • 课程人气: 已有 20 人浏览,其中 2 人选择了在线报名
  • 开课培训:2018-10-13
  • 培训周期:一周以内
  • 上课时间:
  • 授课地点:北京市海淀区东北旺南路29号首农蓝海中心C座7层  地图
  • 交通线路:362路509路909路
  • 学校名称:北京华育兴业科技有限公司
  • 咨询电话: 18913820670

第二阶段 大数据基础课程(105课时)

课程名称

课程内容

课程内容

Hadoop课程

(91课时)

大数据的概述(7学时)

主要讲解大数据历史;大数据出现的原因;大数据解决的问题;大数据目前的发展状态;大数据未来的;我们生活中各行业的大数据应用;云计算的概念;选择hadoop的原因;hadoop在云计算中的作用;hadoop依赖的所有技术和之前课程的。

hadoop集群的搭建(17.5学时)

主要讲解介绍单机版和伪分布式安装,详细介绍每个方式的区别,解决什么问题以及详细的配置,并对每个配置文件做深入讲解。能够查看hadoop进程;理解hadoop启动的整个过程。

掌握hadoop集群的搭建、HA安装(ZK);介绍并带领学生使用hadoop的命令,操作hadoop集群文件的上传、下载、删除等操作;日志错误信息、常见的错误处理方式;zookeeper的介绍与安装。

HDFS基础概念介绍(7学时)

主要讲解块的概念、块的好处、冗余备份、块的切分;元数据概念;NameNode工作原理; DataNode工作原理;Secondary NameNode;客户端含义;HDFS文件操作过程;元数据的持久化;什么是EditsLog和FSImage静像文件;EditsLog和FSImage合并--Checkpoint机制;HDFS命名空间;安全模式;心跳机制;机架感知。

HDFS API案例(7学时)

主要讲解案例包括上传本地文件到HDFS;从HDFS下载文件到本地;创建HDFS文件;创建HDFS目录;重命名HDFS文件;删除HDFS文件;删除HDFS目录;查看某个文件是否存在;数据类型,writeable接口。

YARN资源调度框架介绍(7学时)

主要讲解客户端程序与ResourceManager交互;客户端存贮封装信息;ResourceManager调用NodeManager;NodeManager划分资源池;ResourceManager调用MapReduce程序;执行运算;hadoop伪分布式安装、HA安装,加入YARN的进程,反推理论;运行MR程序,观察YARN在程序运行中的处理过程;hadoop1.0到2.0的变化(新加)。

Mapreduce介绍(7学时)

主要讲解MapReduce产生背景;MapReduce官 方解释;MapReduce特点;MapReduc计算流程:inputsplit、mapper、bine、shuffle、sort、reducer;MapReduce容错性;MapReduce推测机制;MapReduce应用场合以及MR的整个流程的图解。

Mapreduce案例(28学时)

主要讲解经典的MR程序,包括(计数器、InputFormat输入格式、0utputFormat输出格式、单词计数程序biner优化、去重编程、平均程序、数据排序、全排序、倒排序、二次排序、单表关联、多表关联、join连接);排序算法,归并排序,底层源码分析,分区算法;讲解job提交作业的流程;通过WebUI查看log日志。

Zookeeper

(14课时)

Zookeeper介绍和安装(3学时)

主要讲解Zookeeper介绍;Zookeeper下载与安装;Zookeeper配置。

Zookeeper集群搭建(4学时)

主要讲解搭建Zookeeper集群;选举机制及Leader测试;Zookeeper客户端操作。

Zookeeper API客户端开发(7学时)

主要讲解Zookeeper客户端API调用;Zookeeper类、Stat类介绍;创建和删除路径Path;ACL理解;CreateMode:创建模式、VERSI0N版本;设置数据、获取children、Watch(观察者)。

课程类别 课程名称 开班时间 培训价
JAVA Java基础课程 2018-10-13 电询
数据库工程师 分布式数据库课程 2018-10-02 电询
大数据分析师 大数据高级进阶课程 2018-10-09 电询
JAVA 大数据综合实战项目课程 2018-10-06 电询
软件系统 Python培训 2018-10-20 电询

魔据教育隶属于北京华育兴业科技有限公司,是鑫联华(股票代码:835164)旗下全资教育品牌。公司总部位于北京,目前已在哈尔滨、长春、北京、太原、济南等地建立了分校区,合作院校超百所,每年有数千名大数据人才从这里走向工作岗位。

魔据教育专注于为广大大学生和职场人士提供大数据技术的培养,与高校共同制订大数据行业人才培养标准,魔据教育已然成为大数据人才培养的港湾。

魔据教育一贯注重课程创新引领行业发展,组建 30 人研发团队,不断吸收国际前沿理论知识并结合实际市场需求,总结学员、讲师、企业的反馈意见,制定出科学、完善的大数据课程体系,魔据教育现在已经被公认为大数据培训行业课程标准的制定者。

魔据教育依托于多年项目经验组织研发的 Python、Hadoop、Storm、Spark 等课程体系,深入剖析原理的同时,以”求真,务实”的严谨作风,始终致力于培养实战型,紧缺型和创新型的大数据人才。真正做到为学生负责到底,成为学员可信赖、可托付的教育培训品牌。

  • 5
  • 共 1 人评价
  • 学校环境: 5
  • 老师教学: 5
  • 课程性价: 5
  • 交通便利: 5
北京北京大数据分析师培训

5

北京魔据教育欢迎您!

  • 培训电话: 18913820670
  • 建校时间:2009年
  • 培训课程:共6个培训班
  • 培训认证: