光環國際公開課—Hadoop大數據處理技術及其實踐
光環國際公開課—Hadoop大數據處理技術及其實踐
開課時間:2015年1月16日、17日
咨詢電話:400-7060-559 010-846754957
課程內容采用遞進式,分為三個模塊分享:
模塊(一):全方位介紹大數據技術及hadoop系列工具開發技巧
大數據主流技術一個都不能少, hadoop系列工具開發技巧深度解析,與您成功分享技術干貨
模塊(二):真實企業案例分析,讓您輕松玩轉hadoop系列工具
教學過程告別理論宣講,提供一對一真實案例分析,讓您告別紙上談兵,快速玩轉hadoop系列工具
模塊(三):搭建實驗環境,共同探討hadoop技術解決方案
學以致用,快速掌握傳統數據中心向云計算中心轉換的關鍵技術,深入探討如何高效的進行大數據清洗和分析,推動Hadoop在相關領域的項目開發中得到應用。
主講老師:楊文川老師,大數據處理專家,曾經任職于美國朗訊公司貝爾實驗室研究員,現任北郵物聯網中心主任、責任教授。主要從事大數據分析及云計算技術研究,主持和參與了多個國家和省部級基金項目,具有豐富的Hadoop實戰經經驗。
課程大綱
第一講 互聯網思維及大數據 1)互聯網思維 2)云計算技術 3)大數據概念及其應用 4)大數據的主要技術 |
第二講 大數據中的主要技術 1)分布式文件系統 2)MapReduce算法機制 3)對稀疏大表的管理技術 4)并發鎖管理技術 5)Hadoop技術介紹 |
第三講 分布式文件系統 1) 分布式文件系統HDFS 2) HDFS與GFS的區別 2) NameNode和DataNode 3) Jobtracker和Tasktracker 4) Yarn和HA、Federation技術 |
第四講 MapReduce計算模型 1) 并行計算和無共享 2) MapReduce計算模型 3) MapReduce工作流程 4) 行業應用案例 |
第五講 Pig大數據分析工具 1)Pig Latine 2)分析環境搭建 3)關鍵性技術 4)Pig應用實例 |
第六講 NoSQL和云數據庫 1) NoSQL云數據庫 2) 列數據庫HBase介紹 3) HBase的關鍵技術 4) ZooKeeper的使用和管理 5) 使用案例介紹 |
第七講 Hive及云數據倉庫 1) Hive介紹 2) 云數據倉庫搭建 3) Hive數據分析 4) Hive實用案例 |
第八講 從關系數據庫到云數據 1)云數據抽取技術 2)Chukwa的使用 3)Sqoop數據抽取 4)數據抽取案例 |
第九講 其它大數據產品介紹 1)流數據處理技術-Storm介紹 2)實時數據處理技術-Spark介紹 3)各廠商的大數據產品介紹 |
|