本課程內(nèi)容包含F(xiàn)usionInsightHD解決方法架構(gòu)、設(shè)計方案、布署和維護保養(yǎng),互聯(lián)網(wǎng)大數(shù)據(jù)常見部件技術(shù)性原理、設(shè)計方案、布署、管理方法與維護保養(yǎng)(包含HDFS、MapReduce、Yarn、Saprk2x、Hbase、Hive、Streaming、Loader、Flume、Kafka、Zookeeper等)。
培訓(xùn)目標(biāo):
系統(tǒng)軟件了解互聯(lián)網(wǎng)大數(shù)據(jù)架構(gòu)、技術(shù)性原理
把握華為公司互聯(lián)網(wǎng)大數(shù)據(jù)FusionInsightHD計劃方案
具有數(shù)據(jù)管理平臺的設(shè)計規(guī)劃、布署和運維管理工作能力
了解HDFS、MapReduce、Yarn、Spark
了解HBase、Hive、Loader、Flume
了解Kafka、Streaming
了解ZooKeeper
課程大綱:
互聯(lián)網(wǎng)行業(yè)與技術(shù)性發(fā)展趨勢
1.互聯(lián)網(wǎng)時代
2.互聯(lián)網(wǎng)大數(shù)據(jù)的主要用途
3.互聯(lián)網(wǎng)時代的機遇和挑戰(zhàn)
4.華為公司互聯(lián)網(wǎng)大數(shù)據(jù)解決方法
HDFS分布式系統(tǒng)文件
1.HDFS簡述及應(yīng)用領(lǐng)域
2.HDFS在FusionInsight商品中的部位
3.HDFS系統(tǒng)軟件架構(gòu)
4.關(guān)鍵特性介紹
MapReduce分布式線下批處理命令和Yarn資源融洽
1.MapReduce與YARN基礎(chǔ)介紹
2.MapReduce與ARN作用與架構(gòu)
3.YARN的資源優(yōu)化配置和線程同步
4.提高特性
Spark根據(jù)運行內(nèi)存的分布式測算架構(gòu)
1.Spark簡述
2.Spark原理與架構(gòu)
3.Spark在FusionInsight中的集成化狀況
HBase分布式NoSQL數(shù)據(jù)庫查詢
1.Hbase基礎(chǔ)介紹
2.Hbase作用與架構(gòu)
3.Hbase關(guān)鍵步驟
4.Hbase華為公司提高特性
Hive分布式數(shù)據(jù)庫管理
1.Hive簡述
2.Hive作用與架構(gòu)
3.Hive操作過程
Streaming分布式流計算模塊
1.Streaming介紹
2.系統(tǒng)軟件架構(gòu)
3.關(guān)鍵特性介紹
4.StreamSQL介紹
Flink流計算解決和批處理命令服務(wù)平臺
Flink簡述
Flink原理與技術(shù)性架構(gòu)
Flink在FusionInsightHD中的集成化狀況
Loader數(shù)據(jù)交換
1.Loader介紹
2.Loader作業(yè)控制
Flume大量系統(tǒng)日志匯聚
1.Flume介紹及架構(gòu)
2.Flume關(guān)鍵特性介紹
3.Flume運用舉例說明
Kafka分布式信息定閱系統(tǒng)軟件
1.Kafka介紹
2.Kafka架構(gòu)與作用
3.Kafka關(guān)鍵步驟
ZooKeeper群集分布式融洽服務(wù)項目
1.Zookeeper介紹
2.Zookeeper在商品中的部位
3.系統(tǒng)軟件架構(gòu)
4.關(guān)鍵特性介紹
5.與部件的關(guān)聯(lián)
FusionInsightHD解決方法介紹
1.FusionInsight簡述
2.FusionInsight特性介紹
3.FusionInsightHD經(jīng)典案例