阿里基础设施技术亮相SIGCOMM 2018
8月21日,一場(chǎng)在匈牙利舉辦的關(guān)于未來(lái)網(wǎng)絡(luò)技術(shù)走向的SIGCOMM 2018學(xué)術(shù)頂級(jí)會(huì)議獲得了來(lái)自亞洲、北美和歐洲科技界人士密切關(guān)注。阿里巴巴在會(huì)上完整展示了網(wǎng)絡(luò)軟硬件技術(shù)棧和阿里云飛天虛擬網(wǎng)絡(luò)系統(tǒng)-洛神。阿里巴巴在會(huì)上首次從多個(gè)維度分享了網(wǎng)絡(luò)技術(shù)遠(yuǎn)景和開(kāi)創(chuàng)性進(jìn)展,獲得了參會(huì)各方的高度認(rèn)可。
SIGCOMM是網(wǎng)絡(luò)領(lǐng)域的頂級(jí)學(xué)術(shù)會(huì)議
三十多年來(lái)世界頂尖的大學(xué)和科技公司在SIGCOMM上發(fā)表的論文奠定了人們對(duì)最先進(jìn)的網(wǎng)絡(luò)技術(shù)的認(rèn)知。SIGCOMM對(duì)論文的質(zhì)量要求極高,必須具有基礎(chǔ)性貢獻(xiàn)、前瞻性影響和堅(jiān)實(shí)的系統(tǒng)實(shí)現(xiàn),每年只錄用30篇左右。由于SIGCOMM的論文往往會(huì)被廣泛引用,并具有極大的影響力,因此能在SIGCOMM上發(fā)表論文是所有網(wǎng)絡(luò)研究人員孜孜以求的榮譽(yù)。
這屆SIGCOMM,阿里巴巴是唯一擁有技術(shù)專(zhuān)家參與論文評(píng)審和方向制定的中國(guó)公司。
此外,阿里巴巴還在會(huì)議的第一天舉辦了阿里之夜活動(dòng),與來(lái)自亞洲、北美和歐洲的知名學(xué)府包括麻省理工學(xué)院、斯坦福、卡內(nèi)基梅隆、加州大學(xué)伯克利分校、普林斯頓大學(xué)在內(nèi)的大學(xué)教授和博士生們分享了阿里面向未來(lái)網(wǎng)絡(luò)技術(shù)的愿景和挑戰(zhàn)。
美國(guó)工程院院士、SIGCOMM終身成就獎(jiǎng)得主Jennifer Rexford教授、清華大學(xué)長(zhǎng)江特聘教授畢軍老師、卡內(nèi)基梅隆大學(xué)Justin Sherry教授、康奈爾大學(xué)Rachit Agarwal教授參加了活動(dòng)并做了分享。
技術(shù)分享回顧
阿里巴巴的網(wǎng)絡(luò)軟硬件技術(shù)棧
“在當(dāng)前網(wǎng)絡(luò)的規(guī)模快速增長(zhǎng),以及上層應(yīng)用對(duì)網(wǎng)絡(luò)性能、穩(wěn)定性和成本的要求不斷提高的背景下,未來(lái)網(wǎng)絡(luò)技術(shù)亟待突破的三大方向包括可編程/定制化硬件(如SmartNIC,programmable ASIC),軟硬件一體化的設(shè)計(jì)(如RDMA,kernel bypassing),以及智能化網(wǎng)絡(luò)運(yùn)維(如AIOps,intent-based networking)。”
——阿里巴巴研究員張銘
目前,阿里在這幾個(gè)關(guān)鍵的方向上,已經(jīng)系統(tǒng)性的開(kāi)展了前瞻性的基礎(chǔ)研究,并有多項(xiàng)最新研究成果已經(jīng)或正在阿里現(xiàn)網(wǎng)上落地和規(guī)模化部署。
阿里巴巴“Hyper-scale Edge Network”愿景
阿里巴巴基礎(chǔ)設(shè)施首席網(wǎng)絡(luò)架構(gòu)師蔡德忠分享了阿里基礎(chǔ)網(wǎng)絡(luò)的整體演進(jìn)構(gòu)想,展示了阿里在基礎(chǔ)網(wǎng)絡(luò)方面行業(yè)領(lǐng)先的包括RDMA,網(wǎng)絡(luò)可視化,全球流量調(diào)度等前沿研發(fā)成果,并首次對(duì)外分享了阿里巴巴 “Hyper-scale Edge Network” 的愿景。
“從基礎(chǔ)網(wǎng)絡(luò)的角度看,云計(jì)算的第一階段完成了支持百萬(wàn)級(jí)服務(wù)器的數(shù)據(jù)中心網(wǎng)絡(luò),接下來(lái)云計(jì)算會(huì)更加靠近用戶,向邊緣部署以提供更好的用戶體驗(yàn)和支持更多的應(yīng)用場(chǎng)景,比如物聯(lián)網(wǎng),支持百萬(wàn)級(jí)服務(wù)器、分散部署在成千上萬(wàn)個(gè)邊緣節(jié)點(diǎn)的超大規(guī)模邊緣網(wǎng)絡(luò) “Hyper-scale Edge Network” 將是網(wǎng)絡(luò)要實(shí)現(xiàn)的下一個(gè)重要場(chǎng)景,關(guān)系到云計(jì)算在未來(lái)的核心競(jìng)爭(zhēng)力。“Hyper-scale Edge Network” 必須解決三大核心問(wèn)題包括:高效的自動(dòng)化運(yùn)維體系,智能化流量調(diào)度和多層次安全防御。”
——阿里巴巴基礎(chǔ)設(shè)施首席網(wǎng)絡(luò)架構(gòu)師蔡德忠
智能化運(yùn)維中“網(wǎng)絡(luò)層次化模型”
隨著互聯(lián)網(wǎng)經(jīng)濟(jì)的飛速發(fā)展,互聯(lián)網(wǎng)公司的網(wǎng)絡(luò)規(guī)模和復(fù)雜度已達(dá)到了前所未有的高度,并且還在快速增長(zhǎng)。如何高效的管理大規(guī)模網(wǎng)絡(luò)以實(shí)現(xiàn)高性能、高穩(wěn)定和低成本的網(wǎng)絡(luò)服務(wù),一直以來(lái)是網(wǎng)絡(luò)研究界的一項(xiàng)核心難題。
在今年的SIGCOMM會(huì)議上,在由美國(guó)工程院院士,普林斯頓大學(xué)教授Jennifer Rexford主辦的Self-Driving Networks Workshop中,阿里巴巴發(fā)表論文《Automatic Life Cycle Management of Network Configurations》,創(chuàng)新性提出了“網(wǎng)絡(luò)層次化模型”的概念,并且在阿里的全球網(wǎng)絡(luò)中首次證明了通過(guò)這樣一個(gè)統(tǒng)一的網(wǎng)絡(luò)模型,可以實(shí)現(xiàn)網(wǎng)絡(luò)配置的整個(gè)生命周期(包括配置生成,配置驗(yàn)證,和配置變更)的全自動(dòng)化,將網(wǎng)絡(luò)智能化的水平提升到前所未有的高度。
這表明阿里巴巴在網(wǎng)絡(luò)智能化運(yùn)維方面已經(jīng)和Google、亞馬遜、Facebook、微軟達(dá)到了同一高度,并且在網(wǎng)絡(luò)形式化驗(yàn)證、快速故障恢復(fù)等方面開(kāi)始彎道超車(chē)。
RDMA高性能網(wǎng)絡(luò)
與傳統(tǒng)TCP/IP網(wǎng)絡(luò)不同,RDMA提供的低延遲高帶寬能顯著提高機(jī)器學(xué)習(xí)、高性能存儲(chǔ)、大數(shù)據(jù)等應(yīng)用的性能。然而RDMA在高性能的背后也存在著技術(shù)復(fù)雜性極高的難題。阿里巴巴是極少數(shù)能在生產(chǎn)網(wǎng)中大規(guī)模部署RDMA的公司之一。在今年SIGCOMM上,阿里巴巴高級(jí)技術(shù)專(zhuān)家劉洪強(qiáng)博士組織了Kernel Bypassing Networks Workshop以專(zhuān)門(mén)探討RDMA和智能網(wǎng)絡(luò)硬件技術(shù)的最新進(jìn)展,并請(qǐng)來(lái)了Mellanox創(chuàng)始人Eitan Zahavi博士來(lái)做主題演講。Mellanox是RDMA網(wǎng)卡的領(lǐng)軍公司之一,阿里巴巴正在與Mellanox 等網(wǎng)卡廠商深度合作開(kāi)發(fā)新一代RDMA硬件和流控算法。
阿里巴巴高級(jí)技術(shù)專(zhuān)家、計(jì)算機(jī)網(wǎng)絡(luò)領(lǐng)域著名華人學(xué)者劉洪強(qiáng)博士主持KBNet Workshop
Mellanox聯(lián)合創(chuàng)始人,杰出架構(gòu)師Eitan Zahavi在KBNet做主題演講
網(wǎng)絡(luò)可視化
“阿里巴巴是網(wǎng)絡(luò)可視化技術(shù)的先驅(qū)。在豐富的業(yè)務(wù)形態(tài)和大規(guī)模網(wǎng)絡(luò)基礎(chǔ)設(shè)施的驅(qū)使下,阿里近年來(lái)積極與國(guó)際頂級(jí)網(wǎng)絡(luò)硬件廠商合作,推動(dòng)產(chǎn)業(yè)生態(tài)和行業(yè)標(biāo)準(zhǔn),主導(dǎo)設(shè)計(jì)了新一代硬件架構(gòu)和接口,率先實(shí)現(xiàn)了網(wǎng)絡(luò)可視化的規(guī)模化部署,并正在此基礎(chǔ)上研究網(wǎng)絡(luò)架構(gòu)的智能化設(shè)計(jì)、網(wǎng)絡(luò)故障的秒級(jí)恢復(fù)和下一代數(shù)據(jù)中心網(wǎng)絡(luò)流量調(diào)度系統(tǒng),以大幅度提升數(shù)據(jù)中心網(wǎng)絡(luò)的帶寬利用率和穩(wěn)定性。”
——阿里巴巴高級(jí)網(wǎng)絡(luò)架構(gòu)師、數(shù)據(jù)中心網(wǎng)絡(luò)知名專(zhuān)家 曹捷
阿里在今年SIGCOMM的Industry Demo Session上展示了最新的網(wǎng)絡(luò)可視化成果,引起了學(xué)術(shù)界、互聯(lián)網(wǎng)公司、以及硬件廠商等的極大共鳴。
論文資料分享
《Automatic Life Cycle Management of Network Configurations》
《Elastic Sketch: Adaptive and Fast Network-Wide Measurements》
《Network Transparentization in Alibaba》
詳情請(qǐng)查詢:
https://conferences.sigcomm.org/sigcomm/2018
阿里研究員張銘博士
擔(dān)任技術(shù)委員會(huì)委員負(fù)責(zé)SIGCOMM論文評(píng)審,以及主會(huì)Network Verification Session主席
阿里高級(jí)技術(shù)專(zhuān)家劉洪強(qiáng)博士
擔(dān)任KBNets Workshop的技術(shù)委員會(huì)主席,負(fù)責(zé)統(tǒng)籌論文的審定和篩選工作
總結(jié)
以上是生活随笔為你收集整理的阿里基础设施技术亮相SIGCOMM 2018的全部?jī)?nèi)容,希望文章能夠幫你解決所遇到的問(wèn)題。
- 上一篇: 从技术角度聊聊,短视频为何让人停不下来?
- 下一篇: 城市大脑背后的技术有哪些?