Cloudera Apache Hadoop 培訓及認證幫助您進階大數據知識及技能。
Cloudera大學為期4天的Hadoop管理員培訓將幫助學員綜合理解并全面掌握通過Cloudera Manager對Hadoop機群的運維管理,包括:安裝,配置、 負載平衡及性能調優等。通過該培訓,Hadoop 系統管理員將能準備好應對實 際運維中遇到的挑戰。
通過郭大師幽默淺顯易懂的課堂講解,以及帶領實操練習,學員將學習以下內容:
• Cloudera Manager 管理機群的特性,譬如日志匯總、配置管理、報告、 報警及服務管理。
• YARN、MapReduce、Spark 及 HDFS 的工作原理。
• 如何為你的機群選取合適的硬件和架構。
• 如何將 Hadoop 機群和企業已有的系統進行無縫集成。
• 如何使用Flume 進行實時數據采集以及如何使用Sqoop 在 RDBMS 和 Hadoop 機群之間進行數據導入導出。
• 如何配置公平調度器為 Hadoop 上的多用戶提供服務級別保障。
• 產品環境中 Hadoop 機群的較佳運維實踐。
• Hadoop 機群排錯、診斷問題和性能調優。
第1課 Apache Hadoop 介紹
• Hadoop 動機
• 基本概念
• Hadoop 核心部件
第2課 Hadoop 機群安裝
• 機群管理方案
• Cloudera Manager 特性
• Cloudera manager 安裝
• Hadoop (CDH) 安裝
第3課 Hadoop 分布式文件系統 (HDFS)
• HDFS 特性
• 讀寫文件
• NameNode 內存考慮
• HDFS 安全簡介
• HDFS Web UI
• 使用 HDFS Shell
第4課 YARN 上的 MapReduce 和 Spark
• 計算平臺在 Hadoop 里扮演的角色
• YARN:機群資源管理器
• MapReduce 概念
• Apache Spark 概念
• Yarn 上的計算平臺
• YARN Web UI 及 Shell
• YARN 應用運行日志
第5課 Hadoop 配置及服務運行日志
• Cloudera Manager 配置管理機制
• 定位配置參數及進行配置變更
• 管理角色實例及添加服務
• 配置 HDFS 服務
• 配置 Hadoop 服務運行日志
• 配置 YARN 服務
第6課 向 HDFS 導入數據
• 使用 Flume 從外部數據源實時導入數據
• 使用 Sqoop 從關系數據庫導入數據
• REST 接口
• 導入數據的較佳實踐
第7課 Hadoop 機群規劃
• 規劃考慮因素
• 硬件選擇
• 虛擬化選項
• 網絡因素 • 節點配置
第8課 Hive,Impala 及 Pig 的安裝及配置
• Hive
• Impala
• Pig
第9課 Hadoop 客戶端及Hue
• 什么是 Hadoop 客戶端
• 安裝及配置 Hadoop 客戶端
• 安裝及配置 Hue
• 使用 Hue 進行身份驗證及授權
第10課 集群高級配置
• 高級配置參數
• Hadoop 端口配置
• HDFS 機柜感知配置
• HDFS 高可靠性配置
第11課 Hadoop 安全
• Hadoop 安全的重要性
• Hadoop 安全性概念
• Kerberos 簡介
• 使用 Kerberos 保護Hadoop機群
• 其他安全特性
第12課 資源管理
• 使用靜態服務池配置 Linux cgroup
• 公平調度器 • 配置動態資源池
• YARN 內存及 CPU 設置
• Impala 查詢調度
第13課 機群維護
• 檢查 HDFS 狀態
• 機群間復制數據
• 添加/移除機群節點
• 機群數據負載平衡
• 目錄快照 • 機群升級
第14課 機群監控及排錯
• Cloudera Manager 監控特性
• 監控 Hadoop 機群
• Hadoop 機群排錯
• 常見配置不當問題
1、 學習方式:老師發布教學資料、教材,幻燈片和視頻,學員通過網絡下載學習。同時通過論壇互動中老師對學員進行指導及學員之間相互交流。
2、 學習作業:每課均有布置課后作業,學員完成書面作業后則可進入下一課學習。
3、 老師輔導:通過論壇站內信及郵件等多種方式與老師進行一對一互動。
4、 完成課程:最后一課作業交納后,老師完成作業批改,即可完成課程并取回相應剩余的逆向學費。
GMT+8, 2020-12-24 04:47 , Processed in 0.206516 second(s), 35 queries .
關于我們 | 新手指南 | 企業合作 | 聯系我們 |
|
||||
關于我們 | 教育模式 | 企業會員 | 電話:4008-010-006 | |||||
講師招募 | 選課流程 | 內訓合作 | 郵箱:kefu@dataguru.cn | |||||
校園大使 | 學費返還 | 媒體合作 | 客服QQ: |
|||||
版權聲明 | 獎學金激勵 | 代理合作 | 售后QQ: |