DT时代即将到来
???? 今日,Sort Benchmark 在官方網(wǎng)站公布了 2015 年排序競(jìng)賽的最終成績(jī)。其中,阿里云用不到 7 分鐘(377 秒)就完成了 100TB 的數(shù)據(jù)排序,打破了 Apache Spark 的紀(jì)錄 23.4 分鐘。Sort Benchmark 有全球科技公司“計(jì)算奧運(yùn)會(huì)”之稱,更早之前 Hadoop 的記錄是 72 分鐘。
據(jù)介紹,Sort Benchmark 的排序競(jìng)賽包含 4 項(xiàng)比賽,其中 GraySort 和 MinuteSort 主要評(píng)測(cè)計(jì)算系統(tǒng)的規(guī)模和效率,是 4 項(xiàng)比賽中含金量最高的兩項(xiàng)。每一項(xiàng)比賽又分通用目的排序(Daytona)和專用目的排序(Indy)兩個(gè)類別。阿里云飛天分布式計(jì)算系統(tǒng),在這兩項(xiàng)重量 級(jí)比賽中打破了全部 4 項(xiàng)世界紀(jì)錄。
GraySort 評(píng)測(cè)的是超大規(guī)模數(shù)據(jù)量排序的速度,飛天用了 377 秒對(duì) 100TB 數(shù)據(jù)完成排序,也就是說(shuō) 1 分鐘能夠完成 15.9TB 的數(shù)據(jù)排序,去年 Apache Spark 成績(jī)?yōu)?4.35TB/分鐘。MinuteSort 評(píng)測(cè)的是系統(tǒng)在 1 分鐘內(nèi)能夠完成排序的數(shù)據(jù)量,飛天用 1 分鐘完成了對(duì) 7.7TB 數(shù)據(jù)的排序,去年冠軍三星為 3.7TB。
運(yùn)算速度平均每年提高1.5倍。按此算下來(lái)100TB,在5年后,只需要1秒就能完成排序。彼時(shí),計(jì)算時(shí)代將會(huì)到來(lái),很多意想不到的改變更加令人激動(dòng),計(jì)算機(jī)智能也將會(huì)前進(jìn)一大步?,F(xiàn)在從事軟件開發(fā)的工程師和學(xué)校里計(jì)算機(jī)相關(guān)專業(yè)的學(xué)生,應(yīng)該從數(shù)據(jù)技術(shù)和人工智能上著手,才能趕在這個(gè)時(shí)代的前面,創(chuàng)造屬于自己的傳奇。
轉(zhuǎn)載于:https://www.cnblogs.com/guolixiucai/p/4919577.html
總結(jié)
- 上一篇: 生成和获取法定节假日
- 下一篇: LINPACK测试