11月29日，在Flink Forword Asia 2024上，阿里云表示正主導(dǎo)研發(fā)Flink2.0，并首次公開展示其技術(shù)細(xì)節(jié)，F(xiàn)link2.0將全面擁抱大模型，同時(shí)新增云原生存算分離、流批一體、兼容流式湖倉(cāng)等特點(diǎn)，是該技術(shù)誕生十年以來(lái)最大的升級(jí)之一。會(huì)上，阿里云還宣布開源下一代流存儲(chǔ) Fluss 項(xiàng)目，可為Flink 提供實(shí)時(shí)流存儲(chǔ)底座，進(jìn)一步提升實(shí)時(shí)流計(jì)算的性能。

Flink2.0將全面擁抱大模型

十幾年前，移動(dòng)互聯(lián)網(wǎng)時(shí)代應(yīng)用的爆發(fā)對(duì)流計(jì)算提出了新的需求，流計(jì)算引擎成為了實(shí)時(shí)數(shù)倉(cāng)、實(shí)時(shí)推薦、實(shí)時(shí)分析、實(shí)時(shí)大屏、實(shí)時(shí)風(fēng)控等場(chǎng)景的核心技術(shù)之一。2014年，Apache Flink正式誕生，憑借高吞吐量和精準(zhǔn)實(shí)時(shí)數(shù)據(jù)處理的能力，F(xiàn)link迅速超越Storm、Spark Streaming等傳統(tǒng)流計(jì)算引擎，在全球范圍內(nèi)被公認(rèn)為流計(jì)算的事實(shí)標(biāo)準(zhǔn)。目前，F(xiàn)link社區(qū)在全球的貢獻(xiàn)者已有近2000人。

阿里巴巴是國(guó)內(nèi)最早大規(guī)模應(yīng)用Flink技術(shù)的科技公司，并在過(guò)去幾年持續(xù)回饋社區(qū)，先后貢獻(xiàn)和孵化Blink、Flink CDC、Paimon等優(yōu)秀項(xiàng)目，成為Flink社區(qū)最大的貢獻(xiàn)者，有力推動(dòng)社區(qū)和實(shí)時(shí)計(jì)算技術(shù)的發(fā)展。為了滿足大模型應(yīng)用等新興場(chǎng)景的需求，阿里云從去年開始在開源社區(qū)主導(dǎo)推動(dòng) Flink 2.0 的研發(fā)，對(duì) Flink 技術(shù)架構(gòu)進(jìn)行全面升級(jí)，包含存算分離、流批融合、湖倉(cāng)架構(gòu)、AI大模型等技術(shù)方向的眾多創(chuàng)新，這是自 2016 年 Flink 1.0 發(fā)布以來(lái)最大規(guī)模的更新，該版本將于 2025年初正式發(fā)布。

大會(huì)現(xiàn)場(chǎng)，阿里云還宣布開源下一代流存儲(chǔ) Fluss （Flink Unified Streaming Storage）項(xiàng)目，這是圍繞湖倉(cāng)架構(gòu)打造的Flink專屬實(shí)時(shí)流存儲(chǔ)底座，可大幅提升 Flink 實(shí)時(shí)流計(jì)算的能力。即日起，全球開發(fā)者可在Github上下載使用。 

阿里云開源下一代流存儲(chǔ) Fluss

阿里云開源大數(shù)據(jù)平臺(tái)負(fù)責(zé)人王峰表示：“從使用者，到社區(qū)最大的貢獻(xiàn)者，阿里希望持續(xù)推動(dòng)Flink技術(shù)生態(tài)的繁榮，讓Flink普惠千行百業(yè)企業(yè)。”

據(jù)介紹，F(xiàn)link已廣泛應(yīng)用于互聯(lián)網(wǎng)、電商、在線教育、游戲、金融、制造業(yè)、新能源汽車等行業(yè)；2023年，F(xiàn)link憑借其優(yōu)秀的流計(jì)算模型設(shè)計(jì)及其在工業(yè)界和全球范圍內(nèi)的成功應(yīng)用，榮獲SIGMOD Systems Award大獎(jiǎng)。