中新網(wǎng)上海新聞9月5日電(李佳佳)近日，國家市場(chǎng)監(jiān)督管理總局、國家標(biāo)準(zhǔn)化管理委員會(huì)正式發(fā)布大數(shù)據(jù)領(lǐng)域首個(gè)批流融合國家標(biāo)準(zhǔn)GB/T 44216-2024《信息技術(shù) 大數(shù)據(jù) 批流融合計(jì)算技術(shù)要求》，該標(biāo)準(zhǔn)牽頭起草單位為阿里云計(jì)算有限公司，將于2025年2月1日起正式實(shí)施。
《信息技術(shù) 大數(shù)據(jù) 批流融合計(jì)算技術(shù)要求》對(duì)批流融合技術(shù)作了清晰定義，規(guī)定了批流融合系統(tǒng)需能同時(shí)支持實(shí)時(shí)和離線計(jì)算模型，并應(yīng)具備統(tǒng)一資源管理、統(tǒng)一計(jì)算框架、統(tǒng)一API、統(tǒng)一SQL接口、統(tǒng)一作業(yè)管理、統(tǒng)一權(quán)限管理及彈性拓展等關(guān)鍵能力。
批流融合是大數(shù)據(jù)領(lǐng)域重要的新興技術(shù)趨勢(shì)。隨著互聯(lián)網(wǎng)的發(fā)展，企業(yè)在電商推薦、交通物流、金融交易監(jiān)控等眾多場(chǎng)景對(duì)大規(guī)模實(shí)時(shí)數(shù)據(jù)計(jì)算的需求不斷攀升，傳統(tǒng)批量計(jì)算范式在時(shí)延方面難以滿足要求，將實(shí)時(shí)處理數(shù)據(jù)的流式計(jì)算與批量計(jì)算在統(tǒng)一技術(shù)框架下融合成為行業(yè)必經(jīng)之路。
以流計(jì)算兼容批計(jì)算的開源計(jì)算引擎Apache Flink是大數(shù)據(jù)計(jì)算的后起之秀，允許用戶以一套代碼進(jìn)行流處理或批處理，節(jié)省了大量開發(fā)成本。2019年，阿里收購Apache Flink母公司，結(jié)合自身電商場(chǎng)景實(shí)踐，投入大量研發(fā)力量優(yōu)化Apache Flink產(chǎn)品，使其達(dá)到高吞吐、低延遲、高可用、高準(zhǔn)確性的企業(yè)級(jí)應(yīng)用標(biāo)準(zhǔn)，并持續(xù)為全球開源社區(qū)貢獻(xiàn)，成為推動(dòng)社區(qū)和技術(shù)創(chuàng)新的主導(dǎo)力量。目前，Apache Flink已成為行業(yè)內(nèi)批流融合計(jì)算的事實(shí)標(biāo)準(zhǔn)，阿里巴巴、螞蟻集團(tuán)、字節(jié)跳動(dòng)、小米、快手、小紅書、嗶哩嗶哩、滴滴、中國聯(lián)通等上百家企業(yè)都在使用Apache Flink進(jìn)行實(shí)時(shí)計(jì)算。
作為國內(nèi)大數(shù)據(jù)領(lǐng)域領(lǐng)導(dǎo)者，阿里云在2019年發(fā)起了批流融合計(jì)算技術(shù)的國家標(biāo)準(zhǔn)立項(xiàng)和編制工作，并聯(lián)合行業(yè)內(nèi)各單位共同起草完善。融合了阿里云實(shí)時(shí)計(jì)算Flink版的打造經(jīng)驗(yàn)和豐富的行業(yè)實(shí)踐，國家標(biāo)準(zhǔn)《信息技術(shù) 大數(shù)據(jù) 批流融合計(jì)算技術(shù)要求》將更好地推動(dòng)批流融合計(jì)算的技術(shù)發(fā)展，指導(dǎo)國內(nèi)批流融合計(jì)算系統(tǒng)的設(shè)計(jì)、開發(fā)和部署，并進(jìn)一步幫助批流融合技術(shù)在各行業(yè)中落地應(yīng)用。
據(jù)了解，阿里云在大數(shù)據(jù)領(lǐng)域積累了深厚技術(shù)實(shí)力。阿里云擁有從大數(shù)據(jù)處理分析、數(shù)據(jù)倉庫到AI工程化服務(wù)的全棧技術(shù)能力，自主研發(fā)的MaxCompute、Dataworks、Hologres等旗艦產(chǎn)品可提供業(yè)界最高水平的數(shù)據(jù)處理性能、伸縮彈性和穩(wěn)定性；同時(shí)，阿里云積極貢獻(xiàn)并維護(hù)了一系列頂級(jí)開源項(xiàng)目，包括Apache Flink、Apache Paimon等，為開發(fā)者提供豐富的工具選擇，并提供全托管式云服務(wù)。
注：請(qǐng)?jiān)谵D(zhuǎn)載文章內(nèi)容時(shí)務(wù)必注明出處!
編輯：李佳佳
