點擊上方藍字關注我們

《大數(shù)據(jù)》

第7卷第2期 2021年3月

大數(shù)據(jù)2021年第2期

（點擊原文鏈接在官網(wǎng)閱讀完整文章）

目次

01?專題導讀：大數(shù)據(jù)可視分析應用

袁曉如

02?大數(shù)據(jù)可視分析在海洋領域的應用

解翠, 李明悝, 陳萍, 李孝天, 宋鍵, 董軍宇, 趙佳萌

03?足球比賽數(shù)據(jù)可視分析

曹安琪, 陳泓宇, 謝瀟, 巫英才

04?基于移動通信數(shù)據(jù)的城市可視分析研究

王桂娟, 周銳, 蔡夢杰, 湯勇, 李茸茸, 陳華容, 吳亞東

05?食品安全大數(shù)據(jù)可視化關聯(lián)分析

陳誼, 孫夢, 武彩霞, 孫小然

06?中國白酒文化可視化研究

陳超, 吳亞東, 付朝帥, 童興, 李攀, 褚琦凱, 王雪楠

07?專題導讀：高性能計算虛擬數(shù)據(jù)空間

張廣艷

08?面向國家高性能計算環(huán)境的虛擬數(shù)據(jù)空間系統(tǒng)

秦廣軍, 肖利民, 張廣艷, 牛北方, 陳志廣

09?GVDS：面向廣域高性能計算環(huán)境的虛擬數(shù)據(jù)空間

肖利民, 宋堯, 秦廣軍, 周漢杰, 王超波, 韋冰, 魏巍, 霍志勝

10?分布式存儲系統(tǒng)中的數(shù)據(jù)高效緩存方法

楊青霖, 吳桂勇, 張廣艷

11?國家高性能計算環(huán)境的虛擬數(shù)據(jù)空間運行支撐技術(shù)研究

何小雨, 鄧筍根, 欒海晶, 牛北方

12?面向非易失內(nèi)存的MPI-IO接口優(yōu)化

鄧鎮(zhèn)龍, 陳志廣

13?廣東省數(shù)字政府網(wǎng)絡安全評估體系與實踐

高尚省, 郭勇, 高智偉, 鐘世敏, 劉丕群, 劉婷

摘要

專題：大數(shù)據(jù)可視分析應用

專題導讀：大數(shù)據(jù)可視分析應用

作者：袁曉如

摘要：可視化是數(shù)據(jù)科學的重要組成部分。可視化把數(shù)據(jù)轉(zhuǎn)化為可以交互的圖形圖像，能夠幫助用戶更好地理解、分析復雜的數(shù)據(jù)對象，而可視分析則通過緊密耦合可視化交互界面與自動計算，大大提高人類發(fā)現(xiàn)和洞察數(shù)據(jù)內(nèi)在規(guī)律的能力，通過降低對復雜數(shù)據(jù)的認知壁壘，綜合提高對數(shù)據(jù)進行交互探索的能力。過去幾年中，可視化與可視分析多次入選中國計算機學會大數(shù)據(jù)專家委員會發(fā)布的《中國大數(shù)據(jù)技術(shù)與產(chǎn)業(yè)發(fā)展報告》，也位列美國商務部2018年發(fā)布的出口管制清單的數(shù)據(jù)分析技術(shù)首項。近年來，可視化迅速被越來越廣泛地應用在數(shù)據(jù)科學以及日常應用的方方面面。本專題匯集了多方面的可視化應用方向，邀請研究相關領域應用的可視化專家團隊撰文，展示可視化與可視分析的廣闊應用場景。

原文鏈接：http://www.infocomm-journal.com/bdr/article/2021/2096-0271/2096-0271-7-2-00001.shtml

大數(shù)據(jù)可視分析在海洋領域的應用

作者：解翠,?李明悝,?陳萍,?李孝天,?宋鍵,?董軍宇,?趙佳萌

摘要：隨著海洋觀測技術(shù)和數(shù)值仿真技術(shù)的發(fā)展，人們能獲取到規(guī)模更大、分辨率更高的海洋數(shù)據(jù)，這為復雜多元海洋環(huán)境要素及結(jié)構(gòu)現(xiàn)象的分析帶來了機遇，同時也給傳統(tǒng)的分析方法帶來了挑戰(zhàn)。因此，將大數(shù)據(jù)可視分析方法引入了海洋數(shù)據(jù)分析，并探索了其在多元海洋時空數(shù)據(jù)分析、海洋重要結(jié)構(gòu)的時空特征和演化分析等方面的應用價值，開發(fā)了多個可視分析系統(tǒng)，并通過全球和我國周邊一些海域數(shù)據(jù)分析的案例研究，提出了海洋數(shù)據(jù)可視分析的基本框架，展示了可視分析是大數(shù)據(jù)時代海洋復雜數(shù)據(jù)分析方面一種很有前途的技術(shù)。

原文鏈接：http://www.infocomm-journal.com/bdr/article/2021/2096-0271/2096-0271-7-2-00003.shtml

足球比賽數(shù)據(jù)可視分析

作者：曹安琪,?陳泓宇,?謝瀟,?巫英才

摘要：足球比賽數(shù)據(jù)可視分析能夠幫助足球數(shù)據(jù)分析師清晰直觀地發(fā)現(xiàn)比賽中隱藏的規(guī)律，吸引了眾多研究人員的關注。首先對現(xiàn)有的足球比賽數(shù)據(jù)可視分析工作進行闡述，按照數(shù)據(jù)類別將其分為基于統(tǒng)計數(shù)據(jù)的分析、基于事件數(shù)據(jù)的分析、基于軌跡數(shù)據(jù)的分析；然后進一步討論了足球比賽數(shù)據(jù)可視分析當前面臨的挑戰(zhàn)；最后對未來發(fā)展方向進行了展望。

原文鏈接：http://www.infocomm-journal.com/bdr/article/2021/2096-0271/2096-0271-7-2-00015.shtml

基于移動通信數(shù)據(jù)的城市可視分析研究

作者：王桂娟,?周銳,?蔡夢杰,?湯勇,?李茸茸,?陳華容,?吳亞東

摘要：隨著移動電話的深入普及，大規(guī)模通信數(shù)據(jù)給人們提供了前所未有的觀測城市微觀結(jié)構(gòu)和動態(tài)的機會，而如此大規(guī)模的高維異構(gòu)時空關系數(shù)據(jù)又給高效數(shù)據(jù)解讀帶來了挑戰(zhàn)。作為重要的大數(shù)據(jù)分析手段，可視化被越來越多地應用到這一領域。回顧近年來基于通信數(shù)據(jù)的城市可視分析研究工作，首先歸納了移動通信數(shù)據(jù)的主要來源、特征和常用的數(shù)據(jù)處理方法，然后從通信數(shù)據(jù)的內(nèi)在對象“人”“通信設備”和“城市空間”3個方面闡述相應的可視化方法，并對基于通信數(shù)據(jù)的城市可視分析面向的任務、方法和特點進行了梳理，最后對基于通信數(shù)據(jù)的城市可視分析進行了展望。

原文鏈接：http://www.infocomm-journal.com/bdr/article/2021/2096-0271/2096-0271-7-2-00032.shtml

食品安全大數(shù)據(jù)可視化關聯(lián)分析

作者：陳誼,?孫夢,?武彩霞,?孫小然

摘要：隨著檢測技術(shù)的提高和互聯(lián)網(wǎng)技術(shù)的廣泛應用，食品安全數(shù)據(jù)的規(guī)模不斷增大、類型不斷增多，對數(shù)據(jù)分析技術(shù)提出了極大挑戰(zhàn)。近年來出現(xiàn)的可視分析技術(shù)，通過提供圖形交互界面，幫助領域人員深入理解數(shù)據(jù)并洞悉數(shù)據(jù)中的隱含規(guī)律，提高對食品安全風險的分析、發(fā)現(xiàn)、預警和溯源能力，為食品安全監(jiān)測和管控提供了新手段。首先分析了食品安全數(shù)據(jù)的主要來源、特征和分析任務；然后提出了一種關聯(lián)可視分析技術(shù)分類方法，從屬性關聯(lián)、實體關聯(lián)、對比分析和時空分析4個方面闡述了近10年來的食品安全大數(shù)據(jù)可視化關聯(lián)分析方法；最后提出了該領域存在的問題和挑戰(zhàn)。

原文鏈接：http://www.infocomm-journal.com/bdr/article/2021/2096-0271/2096-0271-7-2-00061.shtml

中國白酒文化可視化研究

作者：陳超,?吳亞東,?付朝帥,?童興,?李攀,?褚琦凱,?王雪楠

摘要：作為一種特殊的文化形式，中國白酒文化在傳統(tǒng)的中國文化中有獨特的地位。將可視化技術(shù)應用到中國白酒文化領域，對于傳播和弘揚中國白酒文化的豐富內(nèi)涵、增強文化自信、促進國際文化交流具有重要作用。總結(jié)了中國白酒文化可視化的應用場景，闡述了中國白酒文化可視分析的基本流程，然后從文學作品、文物考古以及歷史演變3個維度分析了中國白酒文化可視化研究現(xiàn)狀，并歸納了文本數(shù)據(jù)可視化、網(wǎng)絡數(shù)據(jù)可視化、時空數(shù)據(jù)可視化和多維數(shù)據(jù)可視化等可視化方法在中國白酒文化可視化領域的呈現(xiàn)類型，最后探討了中國白酒文化可視化的未來研究熱點。

原文鏈接：http://www.infocomm-journal.com/bdr/article/2021/2096-0271/2096-0271-7-2-00078.shtml

專題：高性能計算虛擬數(shù)據(jù)空間

專題導讀：高性能計算虛擬數(shù)據(jù)空間

作者：張廣艷

摘要：高性能計算環(huán)境是支撐國家科技創(chuàng)新、經(jīng)濟發(fā)展的核心基礎設施。目前國家高性能計算環(huán)境的總計算能力已突破200 PFlops，總存儲容量超過160 PB。但是各節(jié)點廣域分散，計算與存儲資源難以統(tǒng)籌使用。本專題從虛擬數(shù)據(jù)空間系統(tǒng)構(gòu)建、分布式系統(tǒng)高效緩存、國家高性能計算環(huán)境對虛擬數(shù)據(jù)空間的運行支撐以及面向非易失內(nèi)存的MPI-IO接口優(yōu)化等多個角度出發(fā)，探索了構(gòu)建高性能計算虛擬數(shù)據(jù)空間的過程中面臨的機遇和挑戰(zhàn)以及相應的解決方案，希望能夠引起廣大讀者的興趣，并起到拋磚引玉的作用。

原文鏈接：http://www.infocomm-journal.com/bdr/article/2021/2096-0271/2096-0271-7-2-00099.shtml

面向國家高性能計算環(huán)境的虛擬數(shù)據(jù)空間系統(tǒng)

作者：秦廣軍,?肖利民,?張廣艷,?牛北方,?陳志廣

摘要：高性能計算環(huán)境是支撐國家科技創(chuàng)新、經(jīng)濟發(fā)展、國防建設的核心信息基礎設施，世界高性能計算強國紛紛建設基于多超算中心資源的廣域高性能計算環(huán)境。然而，高性能計算環(huán)境中資源種類繁多且地域分布廣，無法有效發(fā)揮資源的聚合效應，難以滿足大型應用對廣域分布數(shù)據(jù)的統(tǒng)一管理和高效訪問需求。為此，提出了一套可用于構(gòu)建廣域全局虛擬數(shù)據(jù)空間的完整技術(shù)體系，包括虛擬數(shù)據(jù)空間模型、跨域虛擬數(shù)據(jù)空間構(gòu)建、廣域環(huán)境中數(shù)據(jù)高效遷移、廣域環(huán)境中存算協(xié)同調(diào)度、跨域高并發(fā)數(shù)據(jù)聚合處理等技術(shù)，并研發(fā)了一個可運行于國家高性能計算環(huán)境的虛擬數(shù)據(jù)空間系統(tǒng)，可有效支撐廣域分散異構(gòu)存儲資源的統(tǒng)一高效訪問，實現(xiàn)廣域環(huán)境中分布數(shù)據(jù)的跨域共享和協(xié)同處理。目前，該軟件系統(tǒng)已在國家高性能計算環(huán)境實驗性部署，并驗證了分子對接、全基因組關聯(lián)分析、天氣預報模式3類典型大型應用。驗證結(jié)果表明，所研虛擬數(shù)據(jù)空間構(gòu)建方法和系統(tǒng)可有效聚合廣域分散的存儲資源，滿足大型應用的數(shù)據(jù)空間需求。

原文鏈接：http://www.infocomm-journal.com/bdr/article/2021/2096-0271/2096-0271-7-2-00101.shtml

GVDS：面向廣域高性能計算環(huán)境的虛擬數(shù)據(jù)空間

作者：肖利民,?宋堯,?秦廣軍,?周漢杰,?王超波,?韋冰,?魏巍,?霍志勝

摘要：廣域高性能計算環(huán)境是支撐科技創(chuàng)新和社會經(jīng)濟發(fā)展的核心信息基礎設施。然而，在廣域高性能計算環(huán)境中，異構(gòu)存儲資源在地理位置上的分散分布導致無法發(fā)揮廣域存儲資源的聚合效應，難以滿足對廣域分布數(shù)據(jù)的統(tǒng)一管理和高效訪問需求。為此，提出了虛擬數(shù)據(jù)空間構(gòu)建方法及數(shù)據(jù)訪問性能優(yōu)化方法，并實現(xiàn)了一個面向廣域高性能計算環(huán)境的全局虛擬數(shù)據(jù)空間（GVDS）。GVDS可聚合廣域分布的異構(gòu)存儲資源，形成統(tǒng)一的虛擬數(shù)據(jù)空間，有效支撐用戶以統(tǒng)一訪問模式高效訪問廣域分散的異構(gòu)存儲資源，實現(xiàn)廣域環(huán)境中分布數(shù)據(jù)的跨域共享和協(xié)同處理。測試結(jié)果表明，與國際領先的面向廣域高性能計算環(huán)境的OneData、GFFS等存儲系統(tǒng)相比，GVDS實現(xiàn)了相當?shù)墓δ?#xff0c;且數(shù)據(jù)訪問性能明顯提升。

原文鏈接：http://www.infocomm-journal.com/bdr/article/2021/2096-0271/2096-0271-7-2-00123.shtml

分布式存儲系統(tǒng)中的數(shù)據(jù)高效緩存方法

作者：楊青霖,?吳桂勇,?張廣艷

摘要：針對典型分布式存儲系統(tǒng)存在的寫放大、I/O路徑過長、響應時延較高等問題，提出了一種基于SSD的分布式存儲系統(tǒng)中數(shù)據(jù)高效緩存方法，采用讀寫旁路和懶惰緩存的緩存管理策略，以及兼顧最近訪問時間和歷史訪問頻率的緩存替換策略，并根據(jù)前臺工作負載的變化情況，自適應地調(diào)整主動回刷臟數(shù)據(jù)的速率，顯著提升了存儲系統(tǒng)的讀寫性能。

原文鏈接：http://www.infocomm-journal.com/bdr/article/2021/2096-0271/2096-0271-7-2-00147.shtml

國家高性能計算環(huán)境的虛擬數(shù)據(jù)空間運行支撐技術(shù)研究

作者：何小雨,?鄧筍根,?欒海晶,?牛北方

摘要：國家高性能計算環(huán)境的特點是廣域分散、系統(tǒng)異構(gòu)、存儲資源隔離自治，這對存儲設備管理、數(shù)據(jù)跨域共享等提出了極大的挑戰(zhàn)。首先闡述了虛擬數(shù)據(jù)空間系統(tǒng)的概念，然后分析了其作為國家高性能計算環(huán)境的一部分，如何通過視圖訪問、數(shù)據(jù)共享、計算環(huán)境對接有效降低跨域的訪問開銷；接著通過模塊化方式將虛擬數(shù)據(jù)空間系統(tǒng)與國家高性能計算環(huán)境進行深度的融合，將其功能補充到國家高性能計算環(huán)境中；最后通過統(tǒng)一的虛實空間用戶管理框架實現(xiàn)了跨域統(tǒng)一、透明安全的存儲服務和對大型計算應用的支撐，這對于國家高性能計算環(huán)境的發(fā)展具有十分重要的意義。

原文鏈接：http://www.infocomm-journal.com/bdr/article/2021/2096-0271/2096-0271-7-2-00158.shtml

面向非易失內(nèi)存的MPI-IO接口優(yōu)化

作者：鄧鎮(zhèn)龍,?陳志廣

摘要：在高性能計算環(huán)境中，MPI應用多個計算節(jié)點同時訪問底層存儲系統(tǒng)文件時，其I/O開銷受到訪問模式和外存設備性能的影響。針對MPI應用訪問文件的特征，利用非易失內(nèi)存高帶寬、低時延、可字節(jié)尋址、數(shù)據(jù)可持久化等優(yōu)勢，提出面向非易失內(nèi)存的MPI-IO接口優(yōu)化方案；對文件數(shù)據(jù)建立分布式的緩存并維護持久性的元數(shù)據(jù)、對進程間數(shù)據(jù)傳輸策略進行優(yōu)化，使應用可以有效管理、利用非易失內(nèi)存設備，保持緩存數(shù)據(jù)一致有效。實驗結(jié)果證明，所提系統(tǒng)為應用帶來數(shù)十倍的讀寫性能提升。未來將進一步優(yōu)化本方案的并行性。

原文鏈接：http://www.infocomm-journal.com/bdr/article/2021/2096-0271/2096-0271-7-2-00172.shtml

動態(tài)

廣東省數(shù)字政府網(wǎng)絡安全評估體系與實踐

作者：高尚省,?郭勇,?高智偉,?鐘世敏,?劉丕群,?劉婷

摘要：《2020聯(lián)合國電子政務調(diào)查報告》顯示，全球電子政務整體發(fā)展水平不斷提升，數(shù)字政府轉(zhuǎn)型快速推進，在線政務服務水平普遍提高，數(shù)據(jù)治理框架不斷完善。隨著數(shù)字政府建設的不斷推進和深化應用，網(wǎng)絡安全面臨的風險和挑戰(zhàn)不斷增加。世界各國紛紛在國家戰(zhàn)略的要求和指導下制定了與互聯(lián)網(wǎng)相關的法律或命令，互聯(lián)網(wǎng)發(fā)展越早、越成熟的國家，對網(wǎng)絡安全的治理越關注，例如美國、日本已經(jīng)發(fā)布了國家級網(wǎng)絡安全戰(zhàn)略等。

政府數(shù)字化轉(zhuǎn)型的本質(zhì)是推進政務數(shù)據(jù)的整合、開放和共享，然而政務業(yè)務和數(shù)據(jù)的融合加大了網(wǎng)絡安全防護的難度，網(wǎng)絡安全治理成為我國數(shù)字政府建設的重點。為了防范和化解廣東省數(shù)字政府網(wǎng)絡安全風險，提高風險預見、預判能力，有必要對數(shù)字政府網(wǎng)絡安全防護現(xiàn)狀進行評估，促進全省各地市迭代建設網(wǎng)絡安全防護體系，提升整體安全防護能力。

原文鏈接：http://www.infocomm-journal.com/bdr/article/2021/2096-0271/2096-0271-7-2-00182.shtml

聯(lián)系我們:

Tel:010-81055448

? ? ? ?010-81055490

? ? ? ?010-81055534

E-mail:bdr@bjxintong.com.cn?

http://www.infocomm-journal.com/bdr

http://www.j-bigdataresearch.com.cn/

大數(shù)據(jù)期刊

《大數(shù)據(jù)（Big Data Research，BDR）》雙月刊是由中華人民共和國工業(yè)和信息化部主管，人民郵電出版社主辦，中國計算機學會大數(shù)據(jù)專家委員會學術(shù)指導，北京信通傳媒有限責任公司出版的期刊，已成功入選中文科技核心期刊、中國計算機學會會刊、中國計算機學會推薦中文科技期刊，并被評為2018年國家哲學社會科學文獻中心學術(shù)期刊數(shù)據(jù)庫“綜合性人文社會科學”學科最受歡迎期刊。

關注《大數(shù)據(jù)》期刊微信公眾號，獲取更多內(nèi)容

總結(jié)

以上是生活随笔為你收集整理的《大数据》2021年第2期目次摘要的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯，歡迎將生活随笔推薦給好友。