400-060-0103
| 培養(yǎng)方向 | 技術(shù)棧 | 項(xiàng)目經(jīng)驗(yàn) |
|---|---|---|
| 數(shù)據(jù)平臺開發(fā) | Hadoop/Spark/HBase | 電商用戶行為分析系統(tǒng) |
| 實(shí)時計算方向 | Storm/Flink/Kafka | 金融實(shí)時風(fēng)控系統(tǒng) |
掌握Linux系統(tǒng)管理核心命令,完成Hadoop集群部署與調(diào)優(yōu)。重點(diǎn)學(xué)習(xí)YARN資源調(diào)度機(jī)制,通過日志分析項(xiàng)目理解MapReduce編程范式。
深入Hive數(shù)據(jù)分區(qū)與分桶機(jī)制,結(jié)合Sqoop實(shí)現(xiàn)關(guān)系型數(shù)據(jù)庫與HDFS雙向數(shù)據(jù)遷移。通過零售業(yè)銷售分析項(xiàng)目掌握ETL全流程。
從Storm拓?fù)浣Y(jié)構(gòu)到Spark Streaming微批處理,完成物聯(lián)網(wǎng)設(shè)備數(shù)據(jù)實(shí)時預(yù)警系統(tǒng)開發(fā)。掌握Kafka在數(shù)據(jù)管道中的應(yīng)用技巧。
| 師資標(biāo)準(zhǔn) | 5年以上大數(shù)據(jù)平臺開發(fā)經(jīng)驗(yàn) |
| 硬件配置 | 每人獨(dú)立云服務(wù)器資源 |
| 支持 | 簽訂推薦協(xié)議 |
課程設(shè)置覆蓋從數(shù)據(jù)采集(Flume)、清洗(HiveQL)、存儲(HBase)到計算(Spark MLlib)的全鏈路技術(shù)棧。通過電商推薦系統(tǒng)項(xiàng)目實(shí)戰(zhàn),掌握協(xié)同過濾算法在分布式環(huán)境下的實(shí)現(xiàn)。