阿里云飛天大數(shù)據(jù)平臺(tái)亮相,中國(guó)唯一自主研發(fā)、集群規(guī)模世界第一
- 來(lái)源:互聯(lián)網(wǎng)
- |
- 2019-07-26
- |
- 0 條評(píng)論
- |
- |
- T小字 T大字
7月25日,阿里云飛天大數(shù)據(jù)平臺(tái)亮相阿里云峰會(huì)上海站,擁有中國(guó)唯一自主研發(fā)的計(jì)算引擎,是全球集群規(guī)模最大的計(jì)算平臺(tái),最大可擴(kuò)展至10萬(wàn)臺(tái)計(jì)算集群,支撐海量數(shù)據(jù)存儲(chǔ)和計(jì)算。在民生服務(wù)領(lǐng)域,飛天大數(shù)據(jù)平臺(tái)已經(jīng)“最多跑一次”、城市大腦等場(chǎng)景中,協(xié)助政府優(yōu)化服務(wù)模式,實(shí)現(xiàn)更智能便捷的服務(wù)能力,保障信息安全。
數(shù)據(jù)顯示,目前飛天大數(shù)據(jù)平臺(tái)可擴(kuò)展至10萬(wàn)臺(tái)計(jì)算集群,集群規(guī)模全球第一。單日數(shù)據(jù)處理量從2015年100PB、2016年180PB、2017年320PB,到2018年超過(guò)600PB,僅用三年時(shí)間提升5倍。
在浙江,飛天大數(shù)據(jù)平臺(tái)支撐下,“最多跑一次”打通與老百姓辦事最密切相關(guān)的100個(gè)事項(xiàng)70多億條數(shù)據(jù),老百姓甚至有可能一次都不跑。在杭州,城市大腦實(shí)時(shí)指揮1300個(gè)紅綠燈路口、200多名交警,從2016年到2018年,杭州從全國(guó)最擁堵城市排行榜上下跌52名。
原來(lái)需要跑5個(gè)窗口、耗時(shí)2天才能拿到的新生兒出生證,現(xiàn)在只需在手機(jī)上動(dòng)動(dòng)手指,填9項(xiàng)信息,一個(gè)出生證就辦好了;原來(lái)看一次病排隊(duì)付幾次費(fèi),現(xiàn)在可以看完回家再付錢(qián)……這樣的場(chǎng)景正在越來(lái)越多的城市變?yōu)楝F(xiàn)實(shí),背后有飛天大數(shù)據(jù)平臺(tái)的支撐。
據(jù)了解,該平臺(tái)的研發(fā)源自阿里巴巴的自身實(shí)踐。十年前,新興互聯(lián)網(wǎng)業(yè)態(tài)蓬勃發(fā)展,中小企業(yè)在阿里巴巴電商平臺(tái)上爆發(fā)式增長(zhǎng),商家第一次具備直接觸達(dá)消費(fèi)者的普惠渠道,激發(fā)龐大的消費(fèi)者需求,海量數(shù)據(jù)擊垮傳統(tǒng)IT架構(gòu)。在此背景下,阿里巴巴開(kāi)始探索全新的技術(shù)來(lái)支撐爆發(fā)式增長(zhǎng)的數(shù)據(jù)存儲(chǔ)和計(jì)算需求。
大部分企業(yè)的慣例是直接使用國(guó)際開(kāi)源的數(shù)據(jù)計(jì)算框架Hadoop.在阿里巴巴內(nèi)部,也曾出現(xiàn)過(guò)激烈的爭(zhēng)論,究竟是直接使用開(kāi)源Hadoop,還是從每一行代碼寫(xiě)起,自主研發(fā)一個(gè)大數(shù)據(jù)平臺(tái)。
當(dāng)時(shí),電子商務(wù)蓬勃發(fā)展,人類社會(huì)從未有過(guò)如此規(guī)模的商業(yè)交易在一個(gè)互聯(lián)網(wǎng)平臺(tái)上進(jìn)行,如果用Hadoop搭建的大數(shù)據(jù)平臺(tái),必將在不久的未來(lái)再次遇到挑戰(zhàn),更別提為外部企業(yè)提供服務(wù),成為普惠的IT基礎(chǔ)設(shè)施。
由此,阿里巴巴堅(jiān)定投入飛天大數(shù)據(jù)平臺(tái)研發(fā),將成千上萬(wàn)臺(tái)服務(wù)器組成一臺(tái)超級(jí)計(jì)算機(jī),向社會(huì)提供水電煤一樣的公共服務(wù)。早在2012年初,阿里巴巴技術(shù)委員會(huì)主席王堅(jiān)就表示,“從戰(zhàn)略上來(lái)說(shuō),阿里云想做的事情實(shí)際上可以解讀為Amazon+Google并有所超越。將單一集群做到數(shù)千乃至更高,技術(shù)上是國(guó)家和企業(yè)競(jìng)爭(zhēng)力的標(biāo)志。阿里巴巴必須攻克這道難關(guān)。”
也正是因?yàn)檫@一堅(jiān)持,才有了今天中國(guó)唯一自主研發(fā)的飛天大數(shù)據(jù)平臺(tái)。過(guò)去十年,飛天大數(shù)據(jù)平臺(tái)打破了多個(gè)記錄:2013年,突破了單集群內(nèi)5000臺(tái)服務(wù)器同時(shí)計(jì)算的局限,如今單集群已超過(guò)1萬(wàn)臺(tái)的規(guī)模;2015年,打破計(jì)算界奧運(yùn)會(huì)SortBenchmark的4個(gè)世界紀(jì)錄,用不到7分鐘便完成了100TB的數(shù)據(jù)排序,刷新了ApacheSpark 23.4分鐘的紀(jì)錄。
- 標(biāo)簽:
- 編輯:馬可
- 相關(guān)文章