阿里巴巴黄贵谈存储新硬件带来数据库的机遇
10月27日下午,2018中國(guó)計(jì)算機(jī)大會(huì)上舉辦了主題“存儲(chǔ)軟硬件之國(guó)產(chǎn)化挑戰(zhàn)與機(jī)遇”的技術(shù)論壇,共同探討存儲(chǔ)軟硬件棧上的關(guān)鍵系統(tǒng)與技術(shù)的國(guó)產(chǎn)化發(fā)展道路。論壇上,阿里數(shù)據(jù)庫(kù)資深技術(shù)專家黃貴針對(duì)存儲(chǔ)軟硬件國(guó)產(chǎn)化進(jìn)行了《存儲(chǔ)新硬件給數(shù)據(jù)庫(kù)自研帶來(lái)的機(jī)會(huì)》的報(bào)告。
專家簡(jiǎn)介:
黃貴,阿里巴巴數(shù)據(jù)庫(kù)事業(yè)部資深技術(shù)專家,近10年一直從事分布式存儲(chǔ)、分布式數(shù)據(jù)庫(kù)的設(shè)計(jì)與研發(fā)工作,經(jīng)歷過(guò)連續(xù)6年雙11的數(shù)據(jù)庫(kù)大考,見(jiàn)證了阿里從商業(yè)數(shù)據(jù)庫(kù)到開(kāi)源數(shù)據(jù)庫(kù)再到自主研發(fā)分布式數(shù)據(jù)庫(kù)的過(guò)程。目前的方向是打造全面兼容MySQL生態(tài),新一代跨地域高可用,高可擴(kuò)展,高性能低成本分布式數(shù)據(jù)庫(kù)X-DB。
首先,黃貴介紹了阿里巴巴隨著業(yè)務(wù)迅猛增長(zhǎng)而實(shí)現(xiàn)的數(shù)據(jù)庫(kù)的進(jìn)化,一直發(fā)展到目前已被廣泛應(yīng)用到阿里各項(xiàng)業(yè)務(wù)的異地多活,云化,分布式數(shù)據(jù)庫(kù)X-DB。
其次,黃貴詳述了阿里巴巴數(shù)據(jù)庫(kù)面臨的特殊挑戰(zhàn),以及為了應(yīng)對(duì)這些挑戰(zhàn)而做的設(shè)計(jì),具體思路就是利用現(xiàn)代存儲(chǔ)的多層次結(jié)構(gòu),根據(jù)業(yè)務(wù)訪問(wèn)數(shù)據(jù)特點(diǎn),設(shè)計(jì)出一套分層的存儲(chǔ)架構(gòu),結(jié)合了內(nèi)存數(shù)據(jù)庫(kù)和磁盤數(shù)據(jù)庫(kù)技術(shù),同時(shí)達(dá)成高性能和低成本。
最后,黃貴詳述了數(shù)據(jù)庫(kù)存儲(chǔ)引擎X-Engine的設(shè)計(jì)思想,包括存儲(chǔ)方式、應(yīng)對(duì)超大并發(fā)事務(wù)的流水線事務(wù)處理模式、元數(shù)據(jù)索引結(jié)構(gòu)、數(shù)據(jù)布局、數(shù)據(jù)訪問(wèn)加速、數(shù)據(jù)壓縮等特性,同時(shí)指出其利用NVM引入新的存儲(chǔ)層次,將存儲(chǔ)層次分為冷數(shù)據(jù)、暖數(shù)據(jù)及熱數(shù)據(jù)三類,三個(gè)層次采用Flash/HDD、NVM、DRAM不同存儲(chǔ)類型,以應(yīng)對(duì)不同數(shù)據(jù)特性。X-Engine結(jié)合大數(shù)據(jù)訪問(wèn)熱點(diǎn)集中的特點(diǎn),采用了基于數(shù)據(jù)訪問(wèn)頻率區(qū)分冷熱數(shù)據(jù),并基于數(shù)據(jù)的冷熱進(jìn)行封層存儲(chǔ)的架構(gòu),并在此架構(gòu)上進(jìn)行充分的優(yōu)化以滿足不斷增長(zhǎng)的需求。
阿里云雙十一1折拼團(tuán)活動(dòng):滿6人,就是最低折扣了!
【滿6人】1核2G云服務(wù)器99.5元一年298.5元三年 2核4G云服務(wù)器545元一年 1227元三年
【滿6人】1核1G MySQL數(shù)據(jù)庫(kù) 119.5元一年
【滿6人】3000條國(guó)內(nèi)短信包 60元每6月
參團(tuán)地址:http://click.aliyun.com/m/1000020293/
原文鏈接
本文為云棲社區(qū)原創(chuàng)內(nèi)容,未經(jīng)允許不得轉(zhuǎn)載。
總結(jié)
以上是生活随笔為你收集整理的阿里巴巴黄贵谈存储新硬件带来数据库的机遇的全部?jī)?nèi)容,希望文章能夠幫你解決所遇到的問(wèn)題。
- 上一篇: 阿里如何做到百万量级硬件故障自愈?
- 下一篇: 阿里云数据库自研产品亮相国际顶级会议IC