您现在的位置:情感控制 > 情感说说 > 正文

Hadoop源码解析与开发实战 Hadoop源码深入解析视频教程 Hadoop视频教程

时间:2019-06-20 13:02 作者:admin

Hadoop源码解析与开发实战 Hadoop源码深入解析视频教程 Hadoop视频教程

课程介绍:整套课程从hadoop入门开始,由浅入深,内置“hadoop源码解析与企业应用开发实战”,“Hive开发实战”,“Hbase开发实战”,“Spark,mahout,sqoop,storm诸模块开发实战”。

因为这个课程有4个板块组成,所以学员可以按照自己的实际情况选择学习。

例如,对于只需要了解hadoop基本编程的人,只需要选择“hadoop源码解析与企业应用开发实战”模块就可以了;对于立志于从事大数据领域的零起点人员,可以选择四个板块依次学习;对于已经有一定基础的hadoop开发人员,你可以根据自己的情况,选择学习模块,而不必4个板块从头开始学。 第一部分内容:的起源与生态系统介绍。

要点:了解什么是大数据;Google的三篇论文;围绕Hadoop形成的一系列的生态系统;各个子项目简要介绍集群配置与搭建。

要点:Hadoop安装与部署;如何写配置文件;运行简单的wordcount程序;Hadoop程序结构介绍实战:Hadoop系统的安装与部署;编写配置文件;编写运行简单的wordcount程序。 预期收获:了解什么是大数据以及大数据和hadoop的关系;了解hadoop本身;学会Hadoop系统的安装和部署;学会配置hadoop系统;学会编写简单的wordcount程序;第二部分内容:组件和HDFS组件原理及体系结构介绍。

要点:HadoopIO机制;序列化;压缩;RPC;HDFS副本机制;HDFS读写机制;块选择策略;预期收获:掌握common组件和HDFS组件;了解Hadoop的IO机制;第三部分内容:组件原理及体系架构介绍。 要点:MapReduce工作原理;类型与格式;JT内部实现;TT内部实现;Task运行过程分析;编程实战。

要点:Pipes编程;Streaming编程;动手编写MapReduce程序;实战:编程(Pipes,Streaming);编写MapReduce程序;预期收获:彻底掌握MapReduce这个关键模块;第四部分内容:集群管理与安全机制分析。

要点:Hadoop集群管理机制;Hadoop现有安全机制及ResourcManager组件。 要点:YARN/MRv2环境搭建与部署;ResourceManager组件的分析与实战;实战:动手搭建YARN环境预期收获:掌握Hadoop的集群管理机制;了解Hadoop现有的安全机制;掌握YARN和ResourceManager组件。 -------------------课程目录-------------------课时1免费试听.doc课时2免费试听二.doc课时3付费学员服务指引.doc课时4课前环境准备.doc课时5参考资料.doc课时6Hadoop开源软件及其生态系统.avi课时7HDFS集群的安装与部署.avi课时8MapReduce集群的安装与部署.avi课时9阅读练习Hadoop伪分布式集群部署参考文档.pdf课时9阅读练习ssh实现Linux无密码访问.pdf课时10第一周练习.doc课时11Hadoop架构答疑.avi课时12HDFS架构、SNN、副本放置策略.avi课时课时14练习2:HDFS组件分析课时15本周答疑.avi课时16准备:JNI编程基础.avi课时课时18HDFS压缩.avi课时19HDFS完整性.avi课时20HDFS序列化.avi课时21练习3HDFS详细分析课时22HDFS基于文件的数据结构.avi课时23HadoopRPC远程方法调用.avi课时24练习课时25MapReduceAPI及工作流程(1).avi课时25MapReduceAPI及工作流程(2).avi课时26MapReduce工作原理(2):错误处理、作业调度、Shuffle和课时27MapReduce类型与格式(1).avi课时27MapReduce类型与格式(2).avi课时28练习5:MapReduce工作原理、流程.doc课时29MapReduce重要组件_MapReduceCombiner组件分析.avi课时30MapReduce重要组件_MapReducePartitioner组件.avi课时31MapReduce重要组件_MapReduceRecordreader组件(2).avi课时32练习6:MapReduce重要组件.doc课时33MapReduce计数器.avi课时课时35Map端课时课时37HadoopPipes_Streaming高级编程.avi课时38练习7:MapReduce编程.doc课时39Hadoop集群管理与安全.avi课时课时41练习8:课时42Yarn基础.avi课时43spark讲解.avi游客,如果您要查看本帖隐藏内容请。