煉數成金 門戶 培訓 查看內容

大話流式處理系統 Flink 核心原理

2019-6-20 17:23| 發布者: 仙豆| 查看: 19221| 評論: 0|原作者: 仙豆

管理 SQL 模型 架構 案例

快速報名入口
課程簡介:
本課程首先介紹了 Flink 的開發/調試方法,并結合示例介紹了 DataSet 與 DataStream 的使用方法,Flink 的四層執行圖。接著介紹了流式計算中需要解決的典型問題,如事件時間、亂序問題、窗口操作、Join 實現,以及 Flink 如何解決這些問題。然后分析了 Flink 的狀態管理模型以及精典的 Asynchronous Barrier Snapshotting。最后介紹了如何診斷與優化 Flink 應用,并介紹了一個 Flink 應用案例。

課程大綱:
第一課:Flink 入門
1、Flink 開發/調試環境
2、DataSet 與 DataStream
3、幾種 Key 選擇方法性能比較
4、Accumulator 與 Counter

第二課:Flink 架構
1、Flink 架構
2、Flink 資源分配
3、Flink 任務調度
4、Chaining

第三課:Flink 流式計算之數據處理
1、Transformation
2、Join
3、Process Function
4、Async I/O

第四課:Flink 流式計算之時間
1、處理時間、事件時間與攝取時間
2、Watermark
3、如何處理亂序
4、Side output

第五課:Flink 流式計算之窗口
1、Tumbling Window
2、Sliding Window
3、Session Window
4、Global Window

第六課:Flink 流式計算之狀態與容錯
1、幾種典型的狀態類型
2、Asynchronous Barrier Snapshot
3、Queryable State
4、Flink 狀態使用較佳實踐

第七課:Flink Batch
1、Shuffle 機制
2、Iteration
3、自定義 Connector
4、容錯機制

第八課:Flink Table API & SQL
1、靜態表與動態表
2、連續查詢中的 Join
3、UDF / UDAF / UDTF
4、與 Hive 集成

第九課:Flink 應用診斷與優化
1、背壓問題發現與解決
2、內存調優
3、如何設計并發度
4、正確使用函數注解優化性能

第十課:Flink 實戰演練

授課時間:
本期課程將于12月25日開始。課程持續時間大約為12周。

授課對象:
對 Flink 或者相關大數據開發感興趣的工程師、架構師以及產品經理。較好有 JavaScala 編程基礎

講師簡介:
Jason,就職某大型互聯網公司,多年Kafka和Hadoop及Spark研究、應用及調優經驗。現從事大數據平臺(集群規模兩萬加)優化工作。
個人博客: http://www.jasongj.com
微信公眾號: 大數據架構

課程試聽:

新穎的課程收費形式:“逆向收費”約等于免費學習,僅收取100元固定收費+300元暫存學費,學習圓滿則全額獎勵返還給學員!

本門課程本來打算完全免費,某位大神曾經說過“成功就是正確的方向再加上適度的壓力”。考慮到講師本身要付出巨大的勞動,為了防止一些朋友在學習途中半途而廢,浪費了講師的付出,為此我們計劃模仿某些健身課程,使用“逆向收費”的方法。
在報名時每位報名者收取400元,其中100元為固定 收費,另外300是暫存學費,即如果學員能完成全部課程要求,包括完成全部的書面和互動作業,則300元全款退回,優秀的學員還可以獲得禮品 獎勵。如果學員未能堅持到完全所有的學習計劃任務,則會被扣款。期望這種方式可以轉化為大家強烈的學習愿望和驅動力!

課程授課方式:
1、 學習方式:老師發布教學資料、教材,幻燈片和視頻,學員通過網絡下載學習。同時通過論壇互動中老師對學員進行指導及學員之間相互交流。
2、 學習作業:老師每周布置書面及互動作業,學員需按時按質完成作業。
3、 老師輔導:根據作業批改中發現的問題,針對性給予輔導,幫助大家掌握知識。
4、 結業測驗:通過測驗,完成學業。

您是否對此課程還有疑問,那么請 點擊進入 FAQ,您的問題將基本得到解答
全國統一咨詢熱線 4008-010-006

課程現開始接受報名,報名方式
網上報名 請點擊:
大話流式處理系統 Flink 核心原理
咨詢Email :edu01@dataguru.cnedu02@dataguru.cn
課程入門討論咨詢群:
706821899(群內有培訓公開課視頻供大家免費觀看)
咨詢QQ: 2222010006 (上班時間在線)

技術熱點、 行業資訊,培訓課程信息,盡在煉數成金官方微信,低成本傳遞高端知識!技術成就夢想!歡迎關注!
打開微信,使用掃一掃功能,即刻關注煉數成金官方微信賬戶,不容錯過的精彩,期待您的體驗!!!
快速報名入口
4

鮮花

握手

雷人

路過

雞蛋

剛表態過的朋友 (4 人)

相關閱讀

熱門頻道

  • 大數據
  • 商業智能
  • 量化投資
  • 科學探索
  • 創業

 

GMT+8, 2020-12-24 05:29 , Processed in 0.224387 second(s), 34 queries .

(*^▽^*)MG黑暗故事游戏规则 11选5助手 516棋牌游戏平台 最大麻将赌博网站 步行者教练 中国体彩11选五真准网 福建22选5一等奖多少钱 福彩幸运农场中奖规则 正规合法棋牌平台有哪些 移动赢话费斗地主2 经典麻将单机版 三十三码的鞋内长多少 辽宁快乐12一定牛遗漏 黄金城棋牌最新版本下载 河南麻将一副多少张牌 怎样让程序麻将机失 … 一波中特公开资料8