分布式存儲早期主要用于互聯(lián)網(wǎng)日志、企業(yè)備份歸檔、開發(fā)測試等場景，這些場景無疑是低價值場景，成本是第yi訴求甚至訴求。然此一時彼一時，士別三日也當(dāng)刮目相看。首先是分布式存儲產(chǎn)品能力已今非昔比，逐漸具備了承載企業(yè)高價值業(yè)務(wù)的關(guān)鍵能力，例如毫秒級時延、TB/s級帶寬、雙活/3DC業(yè)務(wù)級容災(zāi)、端到端DIF等，無論是結(jié)構(gòu)化數(shù)據(jù)還是非結(jié)構(gòu)化數(shù)據(jù)的承載，功能完備性的比較大短板早已補齊。其次，分布式存儲已走入眾多高價值關(guān)鍵業(yè)務(wù)，如運營商BOM業(yè)務(wù)、金融渠道類業(yè)務(wù)以及超算、油藏探測HPC等高價值業(yè)務(wù)，通過大規(guī)模應(yīng)用實踐來檢驗成色。（小道消息，某些高價值場景全閃出貨價達到1000美金/TB以上啦）看完當(dāng)下還要看看未來，筆者認為未來高價值的非結(jié)構(gòu)化數(shù)據(jù)場景，分布式存儲的版圖還會持續(xù)擴展。如自動駕駛訓(xùn)練、4K/8K超高清、5G日志留存等場景，對多協(xié)議訪問、極zhi帶寬、擴展性訴求強烈，分布式存儲已然成為這些未來業(yè)務(wù)的優(yōu)先架構(gòu)。 可以從兩方面來理解分布式存儲：用戶側(cè)和實現(xiàn)側(cè)。舟山聯(lián)想分布式存儲架構(gòu)實戰(zhàn)

隨著網(wǎng)絡(luò)帶寬的高速增長，在軟件上的消耗已成為網(wǎng)絡(luò)性能的瓶頸，而通過繞過CPU實現(xiàn)高性能傳輸?shù)腞DMA網(wǎng)絡(luò)成為分布式存儲不錯的選擇。RDMA（RemoteDirectMemoryAccess），可以簡單理解為網(wǎng)卡完全繞過CPU實現(xiàn)兩個服務(wù)器之間的內(nèi)存數(shù)據(jù)交換。其作為一種硬件實現(xiàn)的網(wǎng)絡(luò)傳輸技術(shù)，可以大幅提升網(wǎng)絡(luò)傳輸效率，幫助網(wǎng)絡(luò)IO密集的業(yè)務(wù)（比如分布式存儲、分布式數(shù)據(jù)庫等）獲得更低的時延以及更高的吞吐。初的RDMA是實現(xiàn)在IB（Infiniband）上，由于其新的硬件技術(shù)棧成本比較高，主要用于HPC（高性能計算）等少數(shù)場景。而新的技術(shù)發(fā)展下，能夠?qū)崿F(xiàn)在以太網(wǎng)上使用RDMA。 南通什么是分布式存儲系統(tǒng)原理解析布式存儲系統(tǒng)，采用Scale-out擴展架構(gòu)，可實現(xiàn)超大集群規(guī)模的部署。

目測分布式存儲領(lǐng)域有兩個派系，一派是SDS（軟件定義存儲），一派是軟硬一體。前者以vSAN、Ceph為代biao，以軟件廠商為主在推廣。分布式存儲軟件+通用服務(wù)器組合，打著重定義存儲市場的旗幟，頗有“有王侯將相寧有種乎”的氣勢；另一派是存儲老牌存儲玩家的產(chǎn)品，他們以軟硬一體為主，如Isilon、HCP等。誰主沉浮很難判斷，不過我們不妨從產(chǎn)業(yè)動態(tài)窺見一斑。雖然用過的客戶都詬病分布式存儲軟件+服務(wù)器的方式存在各種兼容性、可靠性、可維護性的問題，但筆者認為SDS這種模式會長期存在，尤其是在傳統(tǒng)的低端領(lǐng)域，如備份歸檔、開發(fā)測試環(huán)境。而越往高duan走，軟硬一體越是占據(jù)主流。業(yè)界主流廠商也在持續(xù)推出軟硬一體的產(chǎn)品：

分布式存儲架構(gòu)由三個部分組成：客戶端、元數(shù)據(jù)服務(wù)器和數(shù)據(jù)服務(wù)器?？蛻舳素撠?zé)發(fā)送讀寫請求，緩存文件元數(shù)據(jù)和文件數(shù)據(jù)。元數(shù)據(jù)服務(wù)器負責(zé)管理元數(shù)據(jù)和處理客戶端的請求，是整個系統(tǒng)的核xin組件。數(shù)據(jù)服務(wù)器負責(zé)存放文件數(shù)據(jù)，保證數(shù)據(jù)的可用性和完整性。該架構(gòu)的好處是性能和容量能夠同時拓展，系統(tǒng)規(guī)模具有很強的伸縮性。分布式存儲分為文件存儲、對象存儲和塊存儲，但它們?nèi)N存儲方式的基本架構(gòu)都是大同小異的。即客戶端或應(yīng)用端、元數(shù)據(jù)（MDS）服務(wù)器和數(shù)據(jù)節(jié)點服務(wù)器?？蛻舳撕驮獢?shù)據(jù)服務(wù)器之間交互是“信令交互”，而客戶端到數(shù)據(jù)節(jié)點是“媒體交互”。元數(shù)據(jù)服務(wù)器或通過數(shù)據(jù)節(jié)點服務(wù)器獲取各節(jié)點服務(wù)器的基本配置情況和狀態(tài)信息。 分布式存儲系統(tǒng)中的多臺服務(wù)器通過網(wǎng)絡(luò)進行連接。

與傳統(tǒng)的存儲架構(gòu)使用RAID模式來保證數(shù)據(jù)的可靠性不同，分布式存儲采用了多副本備份機制。在存儲數(shù)據(jù)之前，分布式存儲對數(shù)據(jù)進行了分片，分片后的數(shù)據(jù)按照一定的規(guī)則保存在集群節(jié)點上。為了保證多個數(shù)據(jù)副本之間的一致性，分布式存儲通常采用的是一個副本寫入，多個副本讀取的強一致性技術(shù)，使用鏡像、條帶、分布式校驗等方式滿足租戶對于可靠性不同的需求。在讀取數(shù)據(jù)失敗的時候，系統(tǒng)可以通過從其他副本讀取數(shù)據(jù)，重新寫入該副本進行恢復(fù)，從而保證副本的總數(shù)固定。當(dāng)數(shù)據(jù)長時間處于不一致狀態(tài)時，系統(tǒng)會自動數(shù)據(jù)重建恢復(fù)，同時租戶可設(shè)定數(shù)據(jù)恢復(fù)的帶寬規(guī)則，小化對業(yè)務(wù)的影響。 超大規(guī)模時空數(shù)據(jù)的分布式存儲與應(yīng)用。紹興大數(shù)據(jù)分布式存儲系統(tǒng)架構(gòu)

分布式存儲“避坑”指南。舟山聯(lián)想分布式存儲架構(gòu)實戰(zhàn)

分布式存儲系統(tǒng)中的多臺服務(wù)器通過網(wǎng)絡(luò)進行連接。但是我們無法保證網(wǎng)絡(luò)是一直通暢的，分布式系統(tǒng)需要具有一定的容錯性來處理網(wǎng)絡(luò)故障帶來的問題。一個令人滿意的情況是，當(dāng)一個網(wǎng)絡(luò)因為故障而分解為多個部分的時候，分布式存儲系統(tǒng)仍然能夠工作。分布式存儲系統(tǒng)需要使用多臺服務(wù)器共同存儲數(shù)據(jù)，而隨著服務(wù)器數(shù)量的增加，服務(wù)器出現(xiàn)故障的概率也在不斷增加。為了保證在有服務(wù)器出現(xiàn)故障的情況下系統(tǒng)仍然可用。一般做法是把一個數(shù)據(jù)分成多份存儲在不同的服務(wù)器中。但是由于故障和并行存儲等情況的存在，同一個數(shù)據(jù)的多個副本之間可能存在不一致的情況。這里稱保證多個副本的數(shù)據(jù)完全一致的性質(zhì)為一致性。 舟山聯(lián)想分布式存儲架構(gòu)實戰(zhàn)

江蘇魏晉元興智能科技有限公司總部位于南京市雨花臺區(qū)大周路32號D2幢北樓3樓-024，是一家智能技術(shù)、計算機技術(shù)研發(fā)、技術(shù)咨詢，技術(shù)轉(zhuǎn)讓:軟件開 發(fā)、銷售;信息系統(tǒng)集成服務(wù):機電產(chǎn)品、計算機及配件、 電線電纜、儀器儀表、電子元器件、機械設(shè)備、機電設(shè)備 節(jié)能設(shè)備、辦公用品、攝影器材、文化用品、通訊設(shè)備、體 育器材、消防器材銷售;綜合布線工程、水電工程、園林綠 化工程、室內(nèi)裝飾工程、土石方工程設(shè)計、施工，提供勞務(wù) 服務(wù);企業(yè)形象策劃:企業(yè)管理咨詢:家用電器銷售、維 修;文化藝術(shù)交流活動組織、 策劃。( 依法須經(jīng)批準的項 目，經(jīng)相關(guān)部門批準后方可開展經(jīng)營活動)的公司。魏晉元興智能深耕行業(yè)多年，始終以客戶的需求為向?qū)В瑸榭蛻籼峁?**的網(wǎng)絡(luò)安全，VR,MR，VR，AI，視頻監(jiān)控安防，出入口門禁失控制。魏晉元興智能繼續(xù)堅定不移地走高質(zhì)量發(fā)展道路，既要實現(xiàn)基本面穩(wěn)定增長，又要聚焦關(guān)鍵領(lǐng)域，實現(xiàn)轉(zhuǎn)型再突破。魏晉元興智能始終關(guān)注數(shù)碼、電腦行業(yè)。滿足市場需求，提高產(chǎn)品價值，是我們前行的力量。