大數(shù)據(jù)工程師培訓流行的培訓學習、分析、挖掘優(yōu)化計算方法、分布式服務數(shù)據(jù)處理、數(shù)學分析模型、三維建模演練、智能化算法優(yōu)化,以及想像力的優(yōu)化計算方法進行,此外運用R、go、python等進行三維建模進行。
階段:Java基礎:
● 核心技能點:Java基礎語法、面向對象、異常處理、集合框架、常用類、I/O操作、多線程、網(wǎng)絡編程、XML解析
● 核心能力培養(yǎng):熟練使用MyElipse開發(fā)Java程序;會使用Java編寫常用的流程控制語句;理解并掌握面向對象思想及其三大特性;能夠靈活運用Java常用類解決實際問題;會使用集合框架存儲數(shù)據(jù)、I/O技術操作文件;能夠實現(xiàn)多線程及網(wǎng)絡編程
● 具備能力及市場價值:深刻理解面向對象思想,掌握JavaEE核心技術并能靈活運用Java常用API解決實際問題,具備了程序員必備的邏輯思維能力及自學能力,為后續(xù)深入學習JavaWeb技術及框架技術打下牢固的基礎。
第二階段:JavaWeb網(wǎng)站開發(fā):
● 核心技能點:HTML5、CSS3、JavaScript/ES6、JQuery、JSP/Servlet、MySQL數(shù)據(jù)庫、JDBC、Linux、SVN
● 核心能力培養(yǎng):了解B/S架構運行原理;掌握網(wǎng)頁的開發(fā)和設計技能;掌握JavaWeb核心開發(fā)技能;掌握Linux應用部署和監(jiān)控技能;掌握基本的JavaEE應用設計和開發(fā)技能;鍛煉學員團隊協(xié)作能力
● 具備能力及市場價值:能夠完成B/S架構的中小型網(wǎng)站系統(tǒng)的開發(fā),并在真實生產(chǎn)環(huán)境下進行項目發(fā)布
第三階段:SSM/SSH框架:
● 核心技能點:MyBatis框架、Spring框架、Spring MVC框架、Struts2框架、Hibernate框架、Git、Maven、Oracle數(shù)據(jù)庫
● 核心能力培養(yǎng):掌握SSM/SSH框架核心技能及應用開發(fā)技能;掌握Oracle數(shù)據(jù)庫設計和應用技能;學會使用Git進行項目代碼版本管理;學會使用Maven進行項目構建管理
● 具備能力及市場價值:能夠勝任垂直架構下的Java開發(fā)工作,熟練使用流行的開發(fā)框架SSM、SSH進行傳統(tǒng)企業(yè)級項目開發(fā)。月薪7000-9000元
第四階段:基于分布式微服的互聯(lián)網(wǎng)架構:
● 核心技能點:分布式微服架構、Dubbox、Spring Cloud、Spring Boot、Docker環(huán)境搭建實現(xiàn)自動化部署、分布式下ID唯一性、Redis、分布式事務處理、分布式下三方接入、Active MQ消息隊列等
● 核心能力培養(yǎng):培養(yǎng)學員基于分布式項目的業(yè)務架構、應用架構、技術架構、安全架構、網(wǎng)絡拓撲架構等的設計和代碼開發(fā)能力,以及在部署策略等方面的綜合能力;培養(yǎng)學員分布式項目下核心業(yè)務處理能力;培養(yǎng)學員在分布式項目下對于高并發(fā)、性能優(yōu)化等問題的解決處理能力
● 具備能力及市場價值:能夠勝任互聯(lián)網(wǎng)公司的分布式項目的開發(fā)和架構設計工作,月薪00-18000元。
第五階段:Python爬蟲+ELK+分析:
● 核心技能點:Linux Shell編程、Python編程、NumPy&Pandas、Scrapy、LXML、PySpider、數(shù)據(jù)采集、整理和清洗、Elasticsearch、Logstash、Kibana
● 核心能力培養(yǎng):掌握Python編程;具備Python的爬蟲開發(fā)、數(shù)據(jù)獲取和整理等能力;能夠使用ELK進行數(shù)據(jù)導入、查詢和集成
● 具備能力及市場價值:能夠勝任Python開發(fā)工程師、爬蟲工程師、搜索引擎工程師。
第六階段:Hadoop生態(tài)圈:
● 核心技能點:HDFS、MapReduce、YARN、Hive、Sqoop、HBase
● 核心能力培養(yǎng):掌握Hadoop集群配置與管理;掌握HDFS文件操作;掌握分布式計算原理;掌握基于Hive的數(shù)據(jù)ETL和數(shù)據(jù)查詢;掌握HBase數(shù)據(jù)存儲;掌握數(shù)據(jù)導入導出
● 具備能力及市場價值:能夠勝任:Hadoop工程師、ETL工程師、Hive工程師、數(shù)據(jù)倉庫工程師。
第七階段:Spark技術棧:
● 核心技能點:Scala編程、Spark RDD、Spark SQL、Spark GraphX、PySpark、Jupyter、Hadoop數(shù)據(jù)模型、Atlas&Ranger、NiFi、Kafka、Oozie、Cassandra&Hive、Redis&Hive、MongoDB、Tableau
● 核心能力培養(yǎng):掌握Spark集群配置與管理,以及Spark離線計算;具備Scala和Python編寫 Spark應用的能力;具備在企業(yè)數(shù)據(jù)湖中建立數(shù)據(jù)流程/通道、實施數(shù)據(jù)監(jiān)管、規(guī)范數(shù)據(jù)管理和確保數(shù)據(jù)安全;具備數(shù)據(jù)采集、數(shù)據(jù)變換、數(shù)據(jù)建模、任務調度以及與企業(yè)應用的數(shù)據(jù)集成的能力;具備多種NoSQL數(shù)據(jù)存儲的能力;掌握Hive/Spark實施數(shù)據(jù)變換、BI工具與 Hive、 NoSQL 的集成;掌握用戶興趣取向分析/航班飛行網(wǎng)圖分析/電子商務消費行為分析/用戶交易欺詐分析案例的具體實現(xiàn)
● 具備能力及市場價值:能夠勝任:Spark工程師、Hadoop工程師、ETL工程師
第八階段:實時流處理平臺:
● 核心技能點:Spark Streaming、Flink、Flume、Storm、d3.js、Echarts
● 核心能力培養(yǎng):掌握Apache NiFi/Kafka/Flume/Spark Streaming的集成使用;具備實時流數(shù)據(jù)存儲、計算、查詢的能力;具備多種流處理框架的運用能力;掌握多種常見可視化工具的使用;掌握股票流數(shù)據(jù)實時分析/輿情分析案例
● 具備能力及市場價值:能夠勝任:大數(shù)據(jù)開發(fā)工程師、大數(shù)據(jù)架構師,市場價值:月薪16000-20000。
第九階段:機器學習:
● 核心技能點:Spark Mllib
● 核心能力培養(yǎng):掌握Spark機器學習數(shù)據(jù)結構及流程;掌握分類,聚類和模型;掌握垃圾郵件分類
● 具備能力及市場價值:能夠勝任:大數(shù)據(jù)架構師、大數(shù)據(jù)初級分析師、大數(shù)據(jù)挖掘工程師,市場價值:月薪25000+
大數(shù)據(jù)開發(fā)工程師標準版
■ 培養(yǎng)崗位:Java開發(fā)工程師
■ 技術能力:1、精通Java語言及Java技能體系;2、熟練掌握SSM/SSH框架技術進行垂直架構項目的開發(fā);3、具備架構設計能力,可進行分布式微服架構項目的開發(fā);4、具備大數(shù)據(jù)Hadoop相關基礎知識
■ 項目經(jīng)驗:1、2年+的互聯(lián)網(wǎng)項目開發(fā)經(jīng)驗;2、具備分布式項目的開發(fā)經(jīng)驗;3、具備針對系統(tǒng)中的擴展性、安全性、高性能等問題的分析、解決能力