當今世界，互聯(lián)網(wǎng)、大數(shù)據(jù)應(yīng)用迅猛發(fā)展，物聯(lián)網(wǎng)、人工智能、云計算 技術(shù)日新月異，隨之而來的是各種企業(yè)和個人應(yīng)用持續(xù)不斷地產(chǎn)生億級甚至是百億級的海量小文件。這些小文件的元數(shù)據(jù)管理、存儲性能以及訪問效率等問題因而成為學術(shù)界和工業(yè)界公認的難題。

例如，國內(nèi)目前最大的電商網(wǎng)站淘寶存儲的商品圖片超過 200 億張，這些文件的平均大小僅為 15KB 左右，國外著名的社交網(wǎng)站Facebook 存儲的圖片總量更是超過了600億張；在線視頻播放服務(wù)中，每個視頻會被切片服務(wù)器分割成 1MB 左右的分片文件，一部動畫電影所包含的圖片文件可能會超過 500 萬張，平均大小為15KB；一些在線閱讀圖書每頁內(nèi)容均會被掃描成大約幾十KB的圖片文件……

在非結(jié)構(gòu)化數(shù)據(jù)和新應(yīng)用快速增加的情況下，對象存儲更能滿足企業(yè)的業(yè)務(wù)需求。為此，杉巖數(shù)據(jù)推出了強大的對象存儲產(chǎn)品，解決企業(yè)對海量圖片、視頻等非結(jié)構(gòu)數(shù)據(jù)存儲需求，以便更好的挖掘非結(jié)構(gòu)化數(shù)據(jù)的價值。

端到端的Scale-Out擴展，實現(xiàn)大數(shù)據(jù)積累

分布式對象存儲總?cè)萘靠蛇_到數(shù)百PB級規(guī)模，單個名字空間也可以擴展到整個硬件存儲總空間容量，不需要割裂成多個隔離空間，并且在文件數(shù)量上會有更大的擴展，文件數(shù)量可達百億級，是真正的端到端Scale-Out快速擴展。它可以滿足業(yè)務(wù)系統(tǒng)整個生命周期的存儲容量需求，無需掛載目錄和調(diào)整業(yè)務(wù)系統(tǒng)，讓IT人員更加關(guān)注業(yè)務(wù)價值本身。

去中心化存儲架構(gòu)，利于數(shù)據(jù)的長期維護

對象存儲采用基于通用x86服務(wù)器+分布式對象存儲軟件的去中心化技術(shù)架構(gòu)，對象存儲軟件將多臺服務(wù)器通過以太網(wǎng)連接，構(gòu)建成一個統(tǒng)一的存儲資源池，可動態(tài)增加或刪除服務(wù)器實現(xiàn)容量的調(diào)整，數(shù)據(jù)能夠自動均衡，實現(xiàn)整個存儲的滾動升級。

三級數(shù)據(jù)可靠性體系，保障業(yè)務(wù)高可用

杉巖對象存儲提供了先進的三級數(shù)據(jù)可靠性體系，通過單集群故障自愈、跨集群容災(zāi)、建立備份機制三大措施來確保企業(yè)數(shù)據(jù)安全可靠，從而保障業(yè)務(wù)的高可靠和高可用性。

· 第一級：

在單集群內(nèi)通過副本機制進行數(shù)據(jù)放置，當出現(xiàn)故障時可以從副本中自動進行快速恢復。此外，還通過糾刪碼機制創(chuàng)建校驗塊，出現(xiàn)錯誤后可以自動進行計算恢復，從而保證集群內(nèi)數(shù)據(jù)的可靠性。

· 第二級：

在集群多個區(qū)域故障的時候，提供跨集群容災(zāi)方案。支持二到六個數(shù)據(jù)中心的數(shù)據(jù)容災(zāi)，包括雙中心或者是更復雜的方式建立存儲集群，不同數(shù)據(jù)中心之間進行數(shù)據(jù)異步傳輸。

· 第三級：

建立主存儲和備份存儲機制。通過按照指定的規(guī)則創(chuàng)建備份點，比如按時間緯度或業(yè)務(wù)變更時進行自動創(chuàng)建。當需要數(shù)據(jù)恢復時，可以快速通過備份點回退到原來的版本。另外，備份工作無需使用額外的備份軟件，同時備份存儲也可以作為容災(zāi)使用。

提供高效的數(shù)據(jù)流轉(zhuǎn)與訪問架構(gòu)

通過進行分支機構(gòu)到主數(shù)據(jù)中心的數(shù)據(jù)匯聚，新增數(shù)據(jù)自動匯聚到主數(shù)據(jù)中心，實現(xiàn)數(shù)據(jù)統(tǒng)一管理和運維。當分支機構(gòu)需要訪問數(shù)據(jù)時，可實現(xiàn)CDN內(nèi)容分發(fā)網(wǎng)絡(luò)效果，提升數(shù)據(jù)傳輸速率。針對互聯(lián)網(wǎng)應(yīng)用還使用高安全性的S3協(xié)議技術(shù)，提供給外部的互聯(lián)網(wǎng)應(yīng)用直接來訪問存儲。

內(nèi)置文件名和標簽索引機制，實現(xiàn)毫秒級檢索

通過采用標簽系統(tǒng)，把文件和相關(guān)的屬性標簽統(tǒng)一存儲到系統(tǒng)中，然后在本地建立這種文件名和屬性的索引庫，從而實現(xiàn)數(shù)據(jù)毫秒級高速檢索，滿足更多業(yè)務(wù)需求。

對象存儲+AI，創(chuàng)造無限可能

在完成大量非結(jié)構(gòu)化數(shù)據(jù)積累后，企業(yè)可以通過結(jié)合AI先進的數(shù)據(jù)分析與挖掘技術(shù)，發(fā)揮海量數(shù)據(jù)背后的價值，為更多智能化的新業(yè)務(wù)系統(tǒng)提供強勁助力，支撐企業(yè)業(yè)務(wù)發(fā)展。

科技世界日新月異，云、大數(shù)據(jù)、人工智能等新興技術(shù)的發(fā)展和普及快到讓人驚嘆。杉巖數(shù)據(jù)將一直專注軟件定義存儲領(lǐng)域的技術(shù)與創(chuàng)新，為企業(yè)用戶提供數(shù)據(jù)存儲強勁支撐，幫助企業(yè)更好、更快、更省心的迎接美好的未來。

總結(jié)

以上是生活随笔為你收集整理的海量图片存储解决方案的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯，歡迎將生活随笔推薦給好友。