【課程介紹】
伴隨著互聯(lián)網(wǎng)技術(shù)、移動互聯(lián)和物聯(lián)網(wǎng)技術(shù)的發(fā)展趨勢,大家早已進一步地邁入了一個大數(shù)據(jù)的時期。大數(shù)據(jù)就是指沒法在一定時間上用基本工具軟件對其內(nèi)容開展抓娶管理方法和解決的數(shù)據(jù)信息結(jié)合,對大數(shù)據(jù)的剖析早已變成一個十分關(guān)鍵且急迫的要求。現(xiàn)階段對大數(shù)據(jù)的分析工具,的是Hadoop服務(wù)平臺。Hadoop在可伸縮性、可擴展性、測算特性和成本費上具備沒法的優(yōu)點,實際上已變成當(dāng)今互聯(lián)網(wǎng)公司流行的大數(shù)據(jù)剖析服務(wù)平臺。為處理眾多控制系統(tǒng)設(shè)計工作人員深入分析與開發(fā)設(shè)計大數(shù)據(jù)技術(shù)的必須,培訓(xùn)學(xué)校特舉行“大數(shù)據(jù)處理技術(shù)-根據(jù)Hadoop的實戰(zhàn)演練”培訓(xùn)機構(gòu),實際事項通告以下:
一、學(xué)習(xí)培訓(xùn)目標(biāo)
1,系統(tǒng)架構(gòu)師、系統(tǒng)分析師、高級程序員、杰出開發(fā)者。
2,涉及大數(shù)據(jù)處理的大數(shù)據(jù)中心運作、整體規(guī)劃、設(shè)計方案責(zé)任人。
3,部門,金融互聯(lián)網(wǎng)、挪動和互聯(lián)網(wǎng)技術(shù)等大數(shù)據(jù)來源于企業(yè)的責(zé)任人。
4,高等院校、科研單位涉及大數(shù)據(jù)與分布式系統(tǒng)數(shù)據(jù)處理方法的項目經(jīng)理。
二、學(xué)生基本
1,對IT系統(tǒng)設(shè)計方案有一定的理論研究工作經(jīng)驗。
2,有一定的數(shù)據(jù)庫管理與大數(shù)據(jù)處理的基本知識。
三、師資力量
由業(yè)內(nèi)著名云計算專家親身講課:
楊老師
關(guān)鍵科學(xué)研究信息網(wǎng)絡(luò)剖析及其云計算有關(guān)技術(shù),長期性從業(yè)通訊網(wǎng)管系統(tǒng)、互聯(lián)網(wǎng)信息資源管理、商務(wù)智能(BI)及其電信網(wǎng)信息處理系統(tǒng)的科學(xué)研究開發(fā)設(shè)計工作中,主持人和參加了好幾個國家和廳局級基金項目,具備豐富多彩的工程項目實踐活動及軟件研發(fā)工作經(jīng)驗。
四、學(xué)習(xí)培訓(xùn)關(guān)鍵點
互聯(lián)網(wǎng)技術(shù)點一下數(shù)據(jù)信息、傳感技術(shù)數(shù)據(jù)信息、日志文件、具備豐富多彩自然地理空間數(shù)據(jù)的數(shù)據(jù)網(wǎng)絡(luò)和涉及到互聯(lián)網(wǎng)的各種評價,變成了海量數(shù)據(jù)的形式多樣。當(dāng)數(shù)據(jù)信息以不計其數(shù)TB持續(xù)提高的情況下,我們在內(nèi)部交易軟件的歷史時間信息內(nèi)容以外,必須一種根據(jù)大數(shù)據(jù)剖析的決策模型和技術(shù)適用。
五、培訓(xùn)計劃
講云計算及大數(shù)據(jù)處理技術(shù)詳細(xì)介紹
1)云計算的定義
2)云計算發(fā)展趨勢現(xiàn)況
3)大數(shù)據(jù)的定義
4)大數(shù)據(jù)的運用
5)大數(shù)據(jù)關(guān)鍵技術(shù)
第二講Google中的關(guān)鍵技術(shù)
1)GFS系統(tǒng)文件
2)Chubby中的Paxos優(yōu)化算法
3)MapReduce技術(shù)體制
4)Bigtable表管理方法技術(shù)
第三講Hadoop系統(tǒng)文件HDFS以及文檔構(gòu)造
1)Hadoop項目概況
2)HDFS系統(tǒng)架構(gòu)
3)HDFS重要管理機制
4)HadoopvsGoogle
5)HadoopAPI
第四講MapReduce程序編寫實體模型以及應(yīng)用程序開發(fā)
1)MapReduce造成背景圖
2)MapReduce程序編寫實體模型
3)MapReduce完成體制
4)MapReduce經(jīng)典案例
第五講PigLatin以及應(yīng)用
1)Pig設(shè)計方案的總體目標(biāo)
2)PigLatine詳細(xì)介紹
3)Pig至關(guān)重要技術(shù)
4)Pig的好用實例
第六講數(shù)據(jù)庫管理Hive應(yīng)用
1)Hive設(shè)計方案總體目標(biāo)
2)Hive數(shù)據(jù)庫系統(tǒng)
3)Hive至關(guān)重要技術(shù)
4)Hive的應(yīng)用實例
第七講HBase和ZooKeeper應(yīng)用
1)Hbase管理機制介紹
2)HBase與HDFS
3)HBase的對外開放插口
4)ZooKeeper的數(shù)據(jù)庫系統(tǒng)
5)ZooKeeper的讀寫能力體制
6)ZooKeeper的操作方法
第八講數(shù)據(jù)抽取專用工具Sqoop應(yīng)用
1)數(shù)據(jù)抽取技術(shù)詳細(xì)介紹
2)Sqoop中的關(guān)鍵技術(shù)
3)Sqoop數(shù)據(jù)抽取對策
4)大數(shù)據(jù)挖掘及剖析
第九講當(dāng)今大數(shù)據(jù)中心的更新改造和變換剖析
1)流行商業(yè)服務(wù)大數(shù)據(jù)解決方法較為
2)流行開源系統(tǒng)云計算系統(tǒng)軟件較為
3)中國象征性大數(shù)據(jù)服務(wù)平臺較為
第十講各生產(chǎn)商的大數(shù)據(jù)產(chǎn)品簡介
1)IBM的大數(shù)據(jù)技術(shù)
2)HP的大數(shù)據(jù)技術(shù)
3)Teradata的大數(shù)據(jù)技術(shù)
4)其他生產(chǎn)商的大數(shù)據(jù)處理
六、培訓(xùn)目標(biāo)
1,全方位掌握大數(shù)據(jù)處理技術(shù)的有關(guān)知識。
2,學(xué)習(xí)培訓(xùn)Hadoop的關(guān)鍵技術(shù)方式 及其運用特點。
3,深層次應(yīng)用Hadoop有關(guān)專用工具在大數(shù)據(jù)中的應(yīng)用。
4,把握傳統(tǒng)式大數(shù)據(jù)中心向云計算管理中心變換的關(guān)鍵技術(shù)。