隨著數(shù)據(jù)量的不斷增長，如何以高效的方式存儲數(shù)據(jù)量成為IT界的一個挑戰(zhàn)。許多傳統(tǒng)存儲解決方案不能滿足日益增長的需求，業(yè)界迫切需要一種新的方法來管理現(xiàn)今的數(shù)據(jù)，為用戶控制訪問時間，縮減管理成本。

?

軟件定義的存儲解決方案是存儲大量數(shù)據(jù)的一個新興方案。當(dāng)代網(wǎng)絡(luò)，云計算、大數(shù)據(jù)技術(shù)的應(yīng)用使得數(shù)據(jù)呈指數(shù)增長，每天增長達(dá)百萬兆背景字節(jié)的數(shù)據(jù)量是常見的情況。我們迫切需要一種更有效的解決方案，如可伸縮擴(kuò)展的軟件定義存儲解決方案Ceph。

?

Ceph是一個具有高度可擴(kuò)展性、開放源碼的軟件定義存儲解決方案，能夠提供基于對象，塊和文件系統(tǒng)的統(tǒng)一的分布式存儲集群服務(wù)。Ceph可以改造公司的IT基礎(chǔ)設(shè)施來管理海量數(shù)據(jù)，并提供非常好的可擴(kuò)展性，存儲集群可以容納大量的利用硬件和守護(hù)進(jìn)程的分布式存儲節(jié)點(diǎn)，互相之間復(fù)制分發(fā)數(shù)據(jù)。Ceph監(jiān)控在Ceph存儲集群的也具有分布式的特點(diǎn)，從而保證高可用性。

?

一個高度可擴(kuò)展的容錯存儲集群，網(wǎng)絡(luò)架構(gòu)和運(yùn)行Ceph的MON（Monitor，監(jiān)控）和Ceph OSD（Object Storage Device，提供存儲資源）一樣重要。對于Ceph存儲集群的主要指標(biāo)就是高擴(kuò)展性和高可用性，因此，網(wǎng)絡(luò)顯然必須有能力處理預(yù)期的客戶端數(shù)量和每個客戶端的吞吐量。該網(wǎng)絡(luò)還必須處理Ceph OSD的心跳、數(shù)據(jù)復(fù)制、集群再平衡以及故障恢復(fù)。在正常操作中，一個單獨(dú)寫主OSD的操作會間接導(dǎo)致寫非主的OSD，寫的次數(shù)基于我們的復(fù)制因子。因此，集群網(wǎng)絡(luò)的流量顯著超過了公眾網(wǎng)絡(luò)在正常工作條件下的流量，在公共網(wǎng)絡(luò)中，Ceph客戶端讀取和寫入數(shù)據(jù)到Ceph OSD守護(hù)進(jìn)程以及發(fā)送OSD心跳信息，而在集群網(wǎng)絡(luò)，Ceph OSD守護(hù)進(jìn)程彼此檢查Ceph OSD的心跳信息，當(dāng)系統(tǒng)出問題的時候，發(fā)送狀態(tài)報告給監(jiān)視器，復(fù)制對象，重平衡集群以及實現(xiàn)backfill和恢復(fù)。

WinStore是云宏提供的企業(yè)級分布式軟件定義塊存儲解決方案。它針對Ceph在性能方面進(jìn)行深度優(yōu)化，對可靠性、易用性、可管理性實施改進(jìn)，實現(xiàn)自動化運(yùn)維。WinStore不但可支持運(yùn)營商實現(xiàn)PB級以上容量的存儲資源池，也可幫助企業(yè)實現(xiàn)成本可控的小規(guī)模水平擴(kuò)展存儲，整合或替代現(xiàn)有中端存儲設(shè)施，或構(gòu)建應(yīng)用融合方案，支撐各種OLTP或OLAP業(yè)務(wù)應(yīng)用。WinStore分布式塊存儲可以幫助用戶發(fā)揮通用的x86服務(wù)器硬件設(shè)施的性能潛力，在管理特性、效能和接口各方面達(dá)到傳統(tǒng)SAN設(shè)備的水平，并具備水平擴(kuò)展的能力，讓用戶在TCO可控的情況下輕松實現(xiàn)“軟件定義存儲”的目標(biāo)。

?

區(qū)別于開源的Ceph，WinStore在關(guān)鍵環(huán)節(jié)進(jìn)行了深度代碼優(yōu)化，包括網(wǎng)絡(luò)和磁盤處理效率的優(yōu)化、數(shù)據(jù)分層與緩存機(jī)制的優(yōu)化等，使得存儲系統(tǒng)能夠勝任高并發(fā)、高輸入輸出效率的需求，與主流NVMe閃存技術(shù)相結(jié)合，通過SPDK新協(xié)議棧優(yōu)化IO路徑，突破單節(jié)點(diǎn)數(shù)千IOPS的瓶頸；通過配置不同性能的通用硬件，無縫適應(yīng)冷熱數(shù)據(jù)切換等各種應(yīng)用場景的性能需求。同時WinStore也具有卷級的QoS（Quality of Service）設(shè)置，支持最為廣泛的客戶應(yīng)用接口。

轉(zhuǎn)載于:https://blog.51cto.com/14035356/2340017

總結(jié)

以上是生活随笔為你收集整理的Ceph分布式存储高性能设计的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯，歡迎將生活随笔推薦給好友。