-
阿里CTO張建鋒:雙11背后是中國(guó)唯一自研的飛天云
最后更新: 2019-11-12 06:53:11(觀(guān)察者網(wǎng)訊)
“不是任何一朵云都能撐住這個(gè)流量。如果說(shuō)中國(guó)有兩朵云,一朵是阿里云,一朵是其他云?!?1月11日晚,阿里巴巴集團(tuán)CTO張建鋒表示,“阿里云不一樣,10年前我們從第一行代碼寫(xiě)起,構(gòu)建了中國(guó)唯一自研的云操作系統(tǒng)飛天?!?
2019天貓雙11再次刷新世界紀(jì)錄,訂單創(chuàng)新峰值達(dá)到54.4萬(wàn)筆/秒,單日數(shù)據(jù)處理量達(dá)到970PB。今年阿里巴巴核心系統(tǒng)100%上云,撐住了雙11的世界級(jí)流量洪峰。
“阿里巴巴是一架高速飛行中的飛機(jī),我們成功在此過(guò)程中換上了全新的引擎?!睆埥ㄤh說(shuō),用公共云來(lái)承載這樣一個(gè)萬(wàn)億規(guī)模的核心系統(tǒng),阿里云是第一個(gè)做到的,“很多云廠(chǎng)商自己的業(yè)務(wù)系統(tǒng),不在自己的云上,今后阿里全部系統(tǒng)都在阿里云上。”
據(jù)了解,阿里巴巴是全球首家將核心系統(tǒng)100%運(yùn)行在公共云上的大型互聯(lián)網(wǎng)公司。同為云計(jì)算巨頭的亞馬遜、微軟、Google,都尚未邁出這一步。
——附錄:張建鋒演講核心觀(guān)點(diǎn)
從去年開(kāi)始,我們決定把整個(gè)阿里巴巴核心系統(tǒng)全部上云,上云還要加一個(gè)定語(yǔ),是上“阿里云”,并不是上任何一朵云都能撐得住這個(gè)流量。在中國(guó),我們經(jīng)常說(shuō)中國(guó)有兩朵云,一朵叫做“阿里云”,還有一朵叫做“其它云”。
為什么講阿里云跟其它云不一樣?因?yàn)樵谥袊?guó)只有阿里云是完全從頭研發(fā)的一朵云,從頭是從每一行代碼,從十年前開(kāi)始寫(xiě),今年是阿里云的第10年,所以我們的云有一個(gè)特別的名字,叫做“飛天操作系統(tǒng)”,當(dāng)初王堅(jiān)博士創(chuàng)辦阿里云的時(shí)候,對(duì)我們這個(gè)云下面的調(diào)度系統(tǒng),整個(gè)云的基礎(chǔ)平臺(tái),取名叫做“飛天操作系統(tǒng)”。
我們的云完全是中國(guó)自研的一朵云,其它很多云從開(kāi)源軟件改造過(guò)來(lái)的,這是非常大的不一樣。
第二個(gè),今年雙11,阿里仍然是一家在高速飛行中的飛機(jī),我們成功的在這個(gè)過(guò)程中換上了全新的引擎。以前大家把非核心負(fù)載放在云上,現(xiàn)在阿里巴巴最核心的系統(tǒng)放在了云上?,F(xiàn)在我們的云把原來(lái)專(zhuān)用的技術(shù)變成公共云,大家都可以來(lái)享受普惠服務(wù)。我們有最好的系統(tǒng),你們也可以在上面跟我們一樣使用。
阿里云承載阿里巴巴自己100%的核心系統(tǒng),這個(gè)是我們?nèi)虻谝粋€(gè)做到的。很多云廠(chǎng)商自己也有業(yè)務(wù)系統(tǒng),但是自己的系統(tǒng)不在自己的云上。我們以后所有阿里系統(tǒng)全部都在阿里云的飛天操作系統(tǒng)上面。
大家一定會(huì)想,這是一個(gè)簡(jiǎn)單的替換還是技術(shù)上非常大的一個(gè)進(jìn)步、非常大的挑戰(zhàn)?我簡(jiǎn)單說(shuō)一下,我們有幾個(gè)方面做得非常好,它不是簡(jiǎn)單的替換,上云之后性能有了一個(gè)非常大的提高。
今天大家可能有感覺(jué),我們前十分鐘,基本上消費(fèi)者沒(méi)有感受到任何抖動(dòng),大家購(gòu)物非常順暢。
第一、我們?cè)诤诵奶摂M機(jī)系統(tǒng)上,自研神龍架構(gòu),用自研的服務(wù)器來(lái)做虛擬化。一般的服務(wù)器隨著壓力增長(zhǎng),最終負(fù)載能力會(huì)慢慢下降,它不是線(xiàn)性的。我們神龍服務(wù)器壓力越大,輸出也是非常線(xiàn)性的,這是非常難做到的。
第二、我們自研了云原生的數(shù)據(jù)庫(kù)。今年有兩個(gè)數(shù)據(jù)庫(kù),一個(gè)是自研的OceanBase,大家知道我們?cè)赥PC-C測(cè)試?yán)锩婺孟铝巳虻谝?。第二是PolarDB,也廣泛用在這次雙11上,沒(méi)有任何問(wèn)題,我們每秒峰值也是遠(yuǎn)遠(yuǎn)超越于原來(lái)Oracle這樣傳統(tǒng)的數(shù)據(jù)庫(kù)。
第三、我們的計(jì)算與存儲(chǔ)做了分離,現(xiàn)在阿里巴巴存儲(chǔ)是有一個(gè)地方專(zhuān)門(mén)存數(shù)據(jù)。數(shù)據(jù)都是從遠(yuǎn)端存取的,所以存儲(chǔ)可以很方便的擴(kuò)容,因?yàn)樗幸粋€(gè)專(zhuān)門(mén)的池。原來(lái)做不到。因?yàn)樵瓉?lái)遠(yuǎn)端存儲(chǔ),訪(fǎng)問(wèn)網(wǎng)絡(luò)速度就跟不上。
第四、之所以現(xiàn)在能夠做到在遠(yuǎn)端存儲(chǔ),能夠比本地讀寫(xiě)磁盤(pán)更快,是因?yàn)槲覀冏隽薘DMA網(wǎng)絡(luò),這是全球第一個(gè)大規(guī)模做RDMA網(wǎng)絡(luò)的公司。
我們這四個(gè)方面都做了核心突破。
今天,飛天操作系統(tǒng)能夠在10萬(wàn)臺(tái)級(jí)別以上的服務(wù)器里面做調(diào)度,今天雙11有非常多的應(yīng)用,但是它并不是說(shuō)每一個(gè)時(shí)間點(diǎn),所有應(yīng)用負(fù)載都是一樣的。我們?cè)诹泓c(diǎn)把大部分計(jì)算機(jī)資源分配給交易等應(yīng)用,過(guò)了一點(diǎn)之后,我們把數(shù)據(jù)分配給數(shù)據(jù)處理系統(tǒng)。數(shù)據(jù)處理今年創(chuàng)了一個(gè)新高,2017年當(dāng)天處理了300PB的數(shù)據(jù),2018年處理了600PB的數(shù)據(jù),今年要處理970P左右的數(shù)據(jù)。
大家可能沒(méi)有概念,一個(gè)P到底有多少數(shù)據(jù),我上次跟央視的人交流,央視拍了這么多年電視新聞節(jié)目,幾十年下來(lái)他了大概80P的數(shù)據(jù)。雙11一天,我們要處理970P的數(shù)據(jù),非常大的量,沒(méi)有一個(gè)先進(jìn)的系統(tǒng)是撐不住的。
第二個(gè)是非常實(shí)時(shí),大家看到了,今天在秒殺,在會(huì)場(chǎng)全部都是個(gè)性化、千人千面的,這里的數(shù)據(jù)不僅是大,而且是要做到非常實(shí)時(shí)。到目前為止,我們菜鳥(niǎo)物流系統(tǒng)已經(jīng)產(chǎn)生了超過(guò)10億筆的物流單,這個(gè)數(shù)據(jù)還在很快的上漲,這些都需要依靠阿里云背后大量的計(jì)算能力。
我們今年的數(shù)據(jù),除了批處理之外,還有流處理,就是實(shí)時(shí)處理所有數(shù)據(jù),就像你們看到的交易數(shù)據(jù),每分鐘、每秒鐘都在變,它并不是從數(shù)據(jù)庫(kù)里面統(tǒng)計(jì)出來(lái)的,它是每生成一筆訂單,系統(tǒng)自動(dòng)一層層把數(shù)據(jù)匯集上來(lái)。我們這個(gè)系統(tǒng)每秒能處理25億筆記錄,這是流式的系統(tǒng)。
我們這么多服務(wù)器,要把它全部管理起來(lái),除了飛天系統(tǒng)之外,還要管理所有的消息流轉(zhuǎn),所以我們自己開(kāi)發(fā)了一個(gè)叫做MQ的消息系統(tǒng),這也是全球目前最大的一個(gè)消息系統(tǒng)。
今天,從飛天系統(tǒng)、大數(shù)據(jù)處理平臺(tái)到智能化應(yīng)用,這些技術(shù)疊加起來(lái)打造了一個(gè)新的分布式的基于云的平臺(tái),才使得阿里整個(gè)經(jīng)濟(jì)體所有核心應(yīng)用都能夠跑在上面。
最后,我們今年發(fā)布了自研的芯片含光800。明年雙11,阿里大量人工智能應(yīng)用都會(huì)跑在自研芯片上面。
今天從飛天云操作系統(tǒng)到神龍服務(wù)器、數(shù)據(jù)庫(kù)、交換機(jī)、交換機(jī)操作系統(tǒng)、RDMA網(wǎng)絡(luò),全部是阿里自研的。我們今天已經(jīng)積累了非常豐富、非常強(qiáng)的能力,從硬件、數(shù)據(jù)庫(kù)、云計(jì)算操作系統(tǒng),到上面的核心應(yīng)用平臺(tái),四位一體,這是這次雙11跟往年最大不一樣的地方。
本文系觀(guān)察者網(wǎng)獨(dú)家稿件,未經(jīng)授權(quán),不得轉(zhuǎn)載。
- 原標(biāo)題:京東11月1日-11日累計(jì)下單金額達(dá)2044億元
- 責(zé)任編輯: 弘毅 
-
蘋(píng)果供貨商良品率低遭棄?回應(yīng):不實(shí),臺(tái)媒炒作6月舊事
2019-11-11 12:34 股市 -
鄔賀銓?zhuān)褐袊?guó)5G輻射遠(yuǎn)低于歐美 但老百姓愛(ài)看養(yǎng)生節(jié)目
2019-11-10 22:44 5G -
石墨烯再“立功”!中國(guó)科學(xué)家成功研制高速晶體管
2019-11-10 21:02 科技前沿 -
川藏鐵路拉林段跨雅魯藏布江大橋合龍,明年鋪軌
2019-11-10 17:11 科技前沿 -
日本數(shù)碼巨頭奧林巴斯將退出相機(jī)市場(chǎng) 三星or索尼接盤(pán)
2019-11-10 16:25 科技前沿 -
華為入場(chǎng),能否幫中國(guó)破局車(chē)載雷達(dá)市場(chǎng)?
2019-11-10 09:30 汽車(chē)工業(yè) -
國(guó)內(nèi)首套!華工科技向印度出口大型激光切焊一體機(jī)
2019-11-09 20:31 -
華為Mate X不能在-5℃及低于該溫度的環(huán)境下彎折
2019-11-08 21:06 -
從差1萬(wàn)到反超20萬(wàn),平板電腦銷(xiāo)量冠軍3個(gè)季度后易主
2019-11-08 17:10 消費(fèi) -
華為在華優(yōu)勢(shì)擴(kuò)大之際,聯(lián)想將手機(jī)下個(gè)戰(zhàn)場(chǎng)放往歐洲
2019-11-08 13:59 手機(jī) -
不止是導(dǎo)航!北斗高精準(zhǔn)燃?xì)庑孤z測(cè)系統(tǒng)首發(fā)
2019-11-08 13:56 北斗照耀 -
中國(guó)新一代智能B型地鐵通過(guò)無(wú)人駕駛測(cè)試 內(nèi)置“黑科技”
2019-11-08 11:09 -
我科學(xué)家研獲高性能柔性有機(jī)太陽(yáng)能電池
2019-11-07 07:39 科技前沿 -
我國(guó)正式啟動(dòng)6G研發(fā)
2019-11-06 19:59 科技前沿 -
直播:任正非對(duì)話(huà)?cǎi)R凱碩
2019-11-06 16:21 華為 -
三星折疊屏手機(jī)國(guó)行上架,不支持5G,售價(jià)15999元
2019-11-06 13:24 手機(jī) -
我國(guó)開(kāi)發(fā)出高能量密度的柔性鈉離子微型超級(jí)電容器
2019-11-05 21:53 -
并列DxOMark第一,雷軍:有友商華為,是小米最大幸運(yùn)
2019-11-05 20:43 手機(jī) -
任正非:研發(fā)基層管理不改革,我們就是下一個(gè)惠普
2019-11-05 10:23 華為 -
相關(guān)推薦 -
歐洲政要“傾巢出動(dòng)” 評(píng)論 32第二次綜合演練,視頻來(lái)了! 評(píng)論 92沉默兩天后,法國(guó)政府承認(rèn):他是我們的人,趕緊釋放 評(píng)論 63“美國(guó)代表團(tuán)‘放鴿子’,不去印度談判了” 評(píng)論 134怕澤連斯基再搞砸,歐洲派“特朗普最?lèi)?ài)的對(duì)話(huà)者”出馬 評(píng)論 59最新聞 Hot
-
美國(guó)豆農(nóng)扛不住了!“沒(méi)有一個(gè)市場(chǎng)能與中國(guó)相提并論”
-
“特朗普拍到我坐在帳篷旁,然后推土機(jī)就來(lái)了”
-
“親自來(lái)看看,巴西熱愛(ài)美中俄......”
-
沉默兩天后,法國(guó)政府承認(rèn):他是我們的人,趕緊釋放
-
“特朗普出人意料地邀請(qǐng),普京接受了”
-
“美國(guó)代表團(tuán)‘放鴿子’,不去印度談判了”
-
怕澤連斯基再搞砸,歐洲派“特朗普最?lèi)?ài)的對(duì)話(huà)者”出馬
-
這次會(huì)吵嗎?他們仨又要在白宮會(huì)面了
-
“特朗普轉(zhuǎn)告,澤連斯基說(shuō)不”
-
“SpaceX靠美國(guó)政府合同賺錢(qián),卻幾乎不繳納聯(lián)邦所得稅”
-
“白素貞”被聘為青城山文旅推薦官
-
李滔,跨省履新云南
-
“上海第三機(jī)場(chǎng)”有新進(jìn)展
-
印度高官膨脹了:不想當(dāng)下一個(gè)中國(guó)
-
“普特會(huì)”談近3小時(shí)未達(dá)成協(xié)議,普京:下次去莫斯科
-
新西蘭防長(zhǎng)咋呼:中國(guó)太讓我意外了,敲醒我
-