Flink

Flink是一個(gè)批處理和流處理結(jié)合的統(tǒng)一計(jì)算框架,其核心是一個(gè)提供了數(shù)據(jù)分發(fā)以及并行化計(jì)算的流數(shù)據(jù)處理引擎。它的最大亮點(diǎn)是流處理,是業(yè)界最頂級(jí)的開源流處理引擎。

Flink最適合的應(yīng)用場(chǎng)景是低時(shí)延的數(shù)據(jù)處理(Data Processing)場(chǎng)景:高并發(fā)pipeline處理數(shù)據(jù),時(shí)延毫秒級(jí),且兼具可靠性。Flink提供高吞吐量、低延遲的流數(shù)據(jù)引擎以及對(duì)事件-時(shí)間處理和狀態(tài)管理的支持。Flink應(yīng)用程序在發(fā)生機(jī)器故障時(shí)具有容錯(cuò)能力,并且支持exactly-once語義。程序可以用Java、Scala、Python和SQL等語言編寫,并自動(dòng)編譯和優(yōu)化到在集群或云環(huán)境中運(yùn)行的數(shù)據(jù)流程序。

鏈接:https://support.huaweicloud.com/productdesc-mrs/mrs_08_003401.html

華為云推薦:

MapReduce服務(wù) https://support.huaweicloud.com/mrs/index.html