Flink入坑指南 第一章 簡介

2021-09-19 18:49:43 字數 937 閱讀 5077

這是個很玄妙的問題。在以下**上做了很專業的介紹。

如果你是大資料從業人士,簡單理解,在功能上:flink>storm=jstorm=spark streaming。玩過大資料的同學對這些系統應該都不陌生。作為流計算領域的後起之秀,flink架構設計先進,ms級延時,支援exactly once語義等,逐漸受到廣大工程師的青睞,有越來越多的公司開始入坑flink。

如果你是大資料小白,應該怎麼理解flink呢?

有問題?點我提問

官方介紹 -- 阿里雲實時計算(alibaba cloud realtime compute)(原阿里雲流計算)是一套基於apache flink構建的一站式、高效能實時大資料處理平台,廣泛應用於流式資料處理、離線資料處理、datalake計算等場景。

實時計算底層計算引擎用的就是flink,並且底層flink版本與開源相比,在sql解析層以及runtime層都做了大量優化,sql支援更完善,效能更優秀。實時計算產品使用的flink版本中的各項feature會開源,逐步推回社群。

實時計算產品在ali內部的引擎上,做了產品化包裝,開發了一套開發+運維ide,並且與其他阿里雲產品的互動做了大量工作。在核心功能上,實時計算產品=flink,因此以後系列文章中,用flink代替產品名稱。

有問題?點我提問

對flink有濃厚興趣,想用flink解決實際生產中的各種問題。

如果你是:

有一定技術基礎,並且會寫sql。恭喜你,你已經具備了學習flink的基礎知識。

大資料從業人員,從本教程中,也可以學到很多原理性知識,從而成長稱為優秀的flink高階開發人員。

有問題?點我提問

flink能解決什麼問題?如果你的場景:

如果你不確定flink是否適合解決你的問題?點我提問。

如果你不確定你的需求在flink中如何實現?點我提問。

如果你對實時計算產品/flink有任何問題?點我提問

Flink入坑指南 第一章 簡介

這是個很玄妙的問題。在以下 上做了很專業的介紹。如果你是大資料從業人士,簡單理解,在功能上 flink storm jstorm spark streaming。玩過大資料的同學對這些系統應該都不陌生。作為流計算領域的後起之秀,flink架構設計先進,ms級延時,支援exactly once語義等,...

第一章 簡介

執行緒的優勢 發揮多處理器的強大能力 由於基本的排程單位是執行緒,因此如果在程式中只有乙個執行緒,那麼最多同時只能在乙個處理器上執行。在雙處理器系統上,單執行緒的程式只能使用一半的cpu資源,而在擁有100個處理器的系統上,將有99 的資源無法使用。在gui應用,執行緒可以提高使用者介面的響應靈敏度...

第一章(簡介)

技術手段 包含運用虛擬專用網路 virtual private network vpn 加密協議,入侵檢測系統 intrusion detection system ids 入侵防禦系統 instrusion prevention system ips 訪問控制列表 access control l...