煉數成金 門戶 培訓 查看內容

《Hadoop集群原理與運維實踐》

2017-7-17 19:39| 發布者: 岸岸| 查看: 47957| 評論: 0|原作者: 岸岸

快速報名入口
快班報名:【快班】Hadoop集群原理與運維實踐 (隨報隨學)
課程簡介
Hadoop已經成為目前大數據處理的事實標準,各大互聯網公司均在用Hadoop來作為數據平臺的重要組成部分。在小規模數據量場景下,并不關心Hadoop集群的規劃與性能問題,能用即可。然而,隨著業務的增長和數據量的增長,在上百臺甚至上千上萬臺集群規模、上PB的數據量下,如何合理的規劃和使用Hadoop集群、如何優化集群發揮更高的效率,就顯得尤為重要。

本課程將從Hadoop集群運維的角度著手,從零開始手把手規劃、部署、安裝、優化和管理集群,綜合互聯網一線大規模Hadoop集群運維的實踐經驗,更深入的剖析Hadoop集群原理,教授如何零基礎構建更加高效、穩定、可擴展的大規模Hadoop集群。通過本課程的學習,有助于深入理解Hadoop原理,能夠勝任PB級大規模Hadoop集群運維管理的工作。

課程大綱

第一課.        預備知識
1.1.        大數據與Hadoop
1.2.        Hadoop發展歷程與現狀
1.3.        Hadoop的基本組成與原理

第二課.     集群部署前的準備
2.1.     硬件選型
2.2.     網絡規劃
2.3.     操作系統選型與配置
2.4.     Hadoop版本選型

第三課.     從零開始安裝部署Hadoop集群

3.1.     偽分布式模式
3.2.     分布式生產環境部署
3.3.     節點規劃
3.4.     集群安裝部署HDFS
3.5.     集群安裝部署MRv2和YARN
3.6.     Hadoop集群benchmark

第四課.     開始使用Hadoop集群

4.1.     Hadoop命令手冊解讀
4.2.     HDFS使用與權限
4.3.     MapReduce Job開發、運行與管理
4.4.     YARN管理

第五課.     Hadoop集群性能優化
5.1.     集群常用配置文件解讀
5.2.     HDFS配置優化
5.3.     MapReduce配置優化
5.4.     YARN配置優化

第六課.     HDFS高可用配置
6.1.     NameNode HA
6.2.     HDFS Federation

第七課.     YARN高可用配置
7.1.     ResourceManager HA
7.2.     NodeManager Recovery

第八課.     Hadoop安全模式與權限控制
8.1.     Hadoop安全模式原理與架構
8.2.     Kerberos原理與Hadoop應用
8.3.     權限控制

第九課.     Hadoop集群管理
9.1.     HDFS權限規劃和Quota管理
9.2.     HDFS擴容與故障節點處理
9.3.     HDFS Balancer
9.4.     HDFS FSCK
9.5.     HDFS distcp
9.6.     YARN Scheduler配置管理
9.7.     YARN擴容與故障節點處理
9.8.     集群版本升級與回滾

第十課.     Hadoop其他組件安裝配置與管理
10.1.     HBase安裝配置管理
10.2.     Hive安裝配置管理
10.3.     Pig安裝配置管理
10.4.     Spark安裝配置與管理

第十一課.     Hadoop集群監控方案
11.1.     JMX監控
11.2.     Ganglia監控
11.3.     Nagios/Zabbix監控

第十二課.     Hadoop新版本特性概述與展望

12.1.     HDFS集中式緩存
12.2.     HDFS分級存儲
12.3.     YARN Node Label
12.4.     YARN Timeline Server
12.5.     YARN Docker執行器
12.6.     Hadoop 3.0展望

授課時間:
課程預計2021年1月14日開課,預計課程持續時間為14周

授課對象:
面向Hadoop集群管理與運維人員,希望進一步了解Hadoop集群原理和從事大規模Hadoop集群運維管理工作的學員。

課程環境:
OS: CentOS 6.5
Hadoop : Cloudera CDH 5.10
JDK: 1.8

收獲預期:
掌握Hadoop的基本原理,掌握Hadoop集群的規劃安裝部署,掌握Hadoop集群優化與管理,能夠勝任大規模Hadoop集群運維管理的角色

授課講師

朱廣彬,就職于國內一線某著名互聯網安全公司,負責千臺Hadoop集群、百億流量的數據平臺架構,關注大數據底層架構相關技術,致力于大數據處理技術在計算廣告的應用,對Hadoop/Hive/HBase/Spark/Kafka等有深入的認識和實踐經驗。Hadoop Contributor、BDTC大會講師。
github: https://github.com/zhuguangbin

課程試聽:


新穎的課程收費形式:“逆向收費”約等于免費學習,僅收取100元固定收費+300元暫存學費,學習圓滿則全額獎勵返還給學員!

本門課程本來打算完全免費,某位大神曾經說過“成功就是正確的方向再加上適度的壓力”。考慮到講師本身要付出巨大的勞動,為了防止一些朋友在學習途中半途而廢,浪費了講師的付出,為此我們計劃模仿某些健身課程,使用“逆向收費”的方法。
在報名時每位報名者收取400元,其中100元為固定 收費,另外300是暫存學費,即如果學員能完成全部課程要求,包括完成全部的書面和互動作業,則300元全款退回。如果學員未能堅持到完全所有的學習計劃任務,則會被扣款。期望這種方式可以轉化為大家強烈的學習愿望和驅動力!

課程授課方式:
1、 學習方式:老師發布教學資料、教材,幻燈片和視頻,學員通過網絡下載學習。同時通過論壇互動中老師對學員進行指導及學員之間相互交流。
2、 學習作業:老師每周布置書面及互動作業,學員需按時按質完成作業。
3、 老師輔導:根據作業批改中發現的問題,針對性給予輔導,幫助大家掌握知識。
4、 結業測驗:通過測驗,完成學業。

您是否對此課程還有疑問,那么請 點擊進入 FAQ,您的問題將基本得到解答
全國統一咨詢熱線 4008-010-006

課程現開始接受報名,報名方式
網上報名 請點擊:Hadoop集群原理與運維實踐
咨詢Email :edu01@dataguru.cnedu02@dataguru.cn
課程入門討論咨詢群:
706821899(群內有培訓公開課視頻供大家免費觀看)
咨詢QQ: 2222010006 (上班時間在線)

技術熱點、 行業資訊,培訓課程信息,盡在煉數成金官方微信,低成本傳遞高端知識!技術成就夢想!歡迎關注!
打開微信,使用掃一掃功能,即刻關注煉數成金官方微信賬戶,不容錯過的精彩,期待您的體驗!!!

快速報名入口
快班報名:【快班】Hadoop集群原理與運維實踐 (隨報隨學)
16

鮮花

握手

雷人

路過

雞蛋

剛表態過的朋友 (16 人)

相關閱讀

熱門頻道

  • 大數據
  • 商業智能
  • 量化投資
  • 科學探索
  • 創業

 

GMT+8, 2020-12-24 05:08 , Processed in 0.182521 second(s), 34 queries .

(*^▽^*)MG黑暗故事游戏规则 北京11选5开桨 斗三公必胜绝技 官网买彩票 湖南幸运赛车app 奥运排球比分规则 在线棋牌公司 内蒙古时时彩怎么查一Welcome 体彩22选5怎么加减3 竞彩足球比分 北单比分最多穿几场 以太坊矿池列表 财神捕鱼放水规律 重庆麻将楼 双色球坐标带连线300期 宁夏11选5走势图新 现货白银期货平台