課程介紹
項(xiàng)目全過(guò)程Hadoop沙盤模擬實(shí)戰(zhàn),通過(guò)一個(gè)完整的大數(shù)據(jù)開(kāi)發(fā)項(xiàng)目及一組實(shí)際項(xiàng)目案例,完全覆蓋Hadoop開(kāi)發(fā)過(guò)程的各個(gè)技術(shù)體系的實(shí)踐應(yīng)用。該項(xiàng)目是一個(gè)課堂實(shí)踐項(xiàng)目,以項(xiàng)目小組的形式進(jìn)行沙盤實(shí)操練習(xí),重點(diǎn)在于強(qiáng)化理解Hadoop項(xiàng)目各個(gè)階段的工作重點(diǎn),同時(shí)明確并強(qiáng)化作為項(xiàng)目管理者的一些基本素質(zhì)。
培訓(xùn)對(duì)象
設(shè)計(jì)、架構(gòu)和開(kāi)發(fā)Hadoop解決方案的開(kāi)發(fā)人員;
進(jìn)行Hadoop等云計(jì)算項(xiàng)目規(guī)劃的咨詢師;
要求具有一定linux操作基礎(chǔ)的IT相關(guān)人員。
課程收益
全面掌握Hadoop的架構(gòu)原理和使用場(chǎng)景;
全程項(xiàng)目實(shí)戰(zhàn)訓(xùn)練;
徹底掌握使用Hadoop進(jìn)行MapReduce程序開(kāi)發(fā);
熟悉分布式計(jì)算領(lǐng)域的常用算法;
掌握Hive、HBase使用與優(yōu)化技巧。
知識(shí)概要
-- Hadoop概要;
-- HDFS架構(gòu)與原理;
-- Map/Reduce架構(gòu)與原理;
-- Map/Reduce架構(gòu)與原理;
-- HBASE架構(gòu)與原理;
-- Hadoop輔助支持工具。
課程大綱
Hadoop概要
Hadoop生態(tài)系統(tǒng)介紹
Hadoop集群安裝與部署
Hadoop獨(dú)立部署
Hadoop偽分布式安裝部署
Hadoop集群安裝與部署
Hadoop配置參數(shù)管理
HDFS架構(gòu)與原理
HDFS體系結(jié)構(gòu)
HDFS讀寫過(guò)程-串行寫與并行讀
HDFS 管理接口-HDFS shell && HDFS Web Interface
HDFS開(kāi)發(fā)與設(shè)計(jì)
HDFS API接口介紹
HDFS Java接口實(shí)例
HDFS開(kāi)發(fā)實(shí)例-基于HDFS實(shí)現(xiàn)云盤系統(tǒng)
Map/Reduce架構(gòu)與原理
Map/Reduce體系結(jié)構(gòu)
Map/Reduce管理接口-Map/Reduce shell && Map/Reduce Web Interface
Map/Reduce開(kāi)發(fā)與設(shè)計(jì)
Map/Reduce API接口介紹
Map/Reduce Java開(kāi)發(fā)實(shí)例
HBASE架構(gòu)與原理
HBASE體系結(jié)構(gòu)
HBASE物理存儲(chǔ)
HBASE關(guān)鍵流程算法
HBASE管理接口-HBase Shell&& HBase Web Interface
HBASE與RDBMS的比較
HBASE開(kāi)發(fā)與設(shè)計(jì)
HBASE API接口介紹
HBASE Java接口實(shí)例
HBASE優(yōu)化專題-海量數(shù)據(jù)寫入優(yōu)化
Hadoop輔助支持工具
Hive-SQL
Pig-通過(guò)腳本實(shí)現(xiàn)Map/Reduce
Sqoop
認(rèn)證過(guò)程
無(wú)認(rèn)證考試
開(kāi)班信息
暫無(wú)開(kāi)班信息