新浪美股訊 7月25日,阿里(177.29, -1.38, -0.77%)云飛天大數(shù)據(jù)平臺亮相阿里云峰會上海站,擁有中國唯一自主研發(fā)的計算引擎,是全球集群規(guī)模最大的計算平臺,最大可擴展至10萬臺計算集群,支撐海量數(shù)據(jù)存儲和計算。在民生服務領域,飛天大數(shù)據(jù)平臺已經(jīng)“最多跑一次”、城市大腦等場景中,協(xié)助政府優(yōu)化服務模式,實現(xiàn)更智能便捷的服務能力,保障信息安全。
數(shù)據(jù)顯示,目前飛天大數(shù)據(jù)平臺可擴展至10萬臺計算集群,集群規(guī)模全球第一。單日數(shù)據(jù)處理量從2015年100PB、2016年180PB、2017年320PB,到2018年超過600PB,僅用三年時間提升5倍。
在浙江,飛天大數(shù)據(jù)平臺支撐下,“最多跑一次”打通與老百姓辦事最密切相關的100個事項70多億條數(shù)據(jù),老百姓甚至有可能一次都不跑。在杭州,城市大腦實時指揮1300個紅綠燈路口、200多名交警,從2016年到2018年,杭州從全國最擁堵城市排行榜上下跌52名。
原來需要跑5個窗口、耗時2天才能拿到的新生兒出生證,現(xiàn)在只需在手機上動動手指,填9項信息,一個出生證就辦好了;原來看一次病排隊付幾次費,現(xiàn)在可以看完回家再付錢……這樣的場景正在越來越多的城市變?yōu)楝F(xiàn)實,背后有飛天大數(shù)據(jù)平臺的支撐。
據(jù)了解,該平臺的研發(fā)源自阿里巴巴的自身實踐。十年前,新興互聯(lián)網(wǎng)業(yè)態(tài)蓬勃發(fā)展,中小企業(yè)在阿里巴巴電商平臺上爆發(fā)式增長,商家第一次具備直接觸達消費者的普惠渠道,激發(fā)龐大的消費者需求,海量數(shù)據(jù)擊垮傳統(tǒng)IT架構。在此背景下,阿里巴巴開始探索全新的技術來支撐爆發(fā)式增長的數(shù)據(jù)存儲和計算需求。
大部分企業(yè)的慣例是直接使用國際開源的數(shù)據(jù)計算框架Hadoop。在阿里巴巴內部,也曾出現(xiàn)過激烈的爭論,究竟是直接使用開源Hadoop,還是從每一行代碼寫起,自主研發(fā)一個大數(shù)據(jù)平臺。
當時,電子商務蓬勃發(fā)展,人類社會從未有過如此規(guī)模的商業(yè)交易在一個互聯(lián)網(wǎng)平臺上進行,如果用Hadoop搭建的大數(shù)據(jù)平臺,必將在不久的未來再次遇到挑戰(zhàn),更別提為外部企業(yè)提供服務,成為普惠的IT基礎設施。
由此,阿里巴巴堅定投入飛天大數(shù)據(jù)平臺研發(fā),將成千上萬臺服務器組成一臺超級計算機,向社會提供水電煤一樣的公共服務。早在2012年初,阿里巴巴技術委員會主席王堅就表示,“從戰(zhàn)略上來說,阿里云想做的事情實際上可以解讀為Amazon+Google并有所超越。將單一集群做到數(shù)千乃至更高,技術上是國家和企業(yè)競爭力的標志。阿里巴巴必須攻克這道難關。”
也正是因為這一堅持,才有了今天中國唯一自主研發(fā)的飛天大數(shù)據(jù)平臺。過去十年,飛天大數(shù)據(jù)平臺打破了多個記錄:2013年,突破了單集群內5000臺服務器同時計算的局限,如今單集群已超過1萬臺的規(guī)模;2015年,打破計算界奧運會SortBenchmark的4個世界紀錄,用不到7分鐘便完成了100TB的數(shù)據(jù)排序,刷新了ApacheSpark 23.4分鐘的紀錄。
已有0人發(fā)表了評論