您的當前位置: 首頁 > 新聞中心 > 行業知識 > 分布式存儲平臺有哪些?分布式存儲平臺龍頭介紹

分布式存儲平臺有哪些?分布式存儲平臺龍頭介紹

1.分布式存儲平臺有哪些

分布式存儲是指多個路由器協作共同完成存儲,這樣有助于提高緩存效率,保持更多的信息。分布式存儲平臺就是分布式存儲服務的運行平臺。目前比較有名的分布式存儲平臺主要有HDFS、 Ceph、GFS、GlusterFS 及Swift等。同時, 隨著云計算、大數據等技術的不斷發展,更多新的分布式存儲技術及平臺仍在涌現。

分布式存儲

2.分布式存儲平臺龍頭

(1)Ceph Ceph:經過多年的發展,受到眾多存儲和云計算廠商的重視,成為了應用最 廣泛的開源分布式存儲平臺。Ceph利用存儲節點計算能力,計算得出該數據存儲的位置,將數據分布均衡。同時,Ceph采用了CRUSH、HASH 等算法,杜絕了傳統的單點故障問題,實現水平擴展的性能。

Ceph 的特點如下: 1) Ceph 支持對象存儲、塊存儲和文件存儲服務; 2)采用CRUSH等算法,數據分布均衡,并行度高; 3)支持多個副本,并保持多副本間的強一致性; 4)去中心化,MDS之間地位相同,無固定的中心節點。

(2)GFS GFS(Google File System):適用于大量的順序讀取和順序追加,注重大文件 的持續穩定帶寬。2013年,Google公布了Colossus項目,作為下一代的 Google 文件系統,與前一代的GFS相比,Colossus增加了主控服務器集群,重新平衡了舊的冷數據,并在磁盤上進行新數據的分發。

GFS的特點如下: 1) 適合大文件場景的應用以及適數據訪問延時不敏感的搜索類業務; 2) 中心化架構,只有1個master處于工作狀態,Colossus有改進后,將單一主控服務器改造為多主控服務器構成的集群,將所有管理數據進行 數據分片后分配到不同的主控服務器上,增加可用性; 3) 緩存和預取,通過在client端緩存元數據,盡量減少與master的交互, 通過文件的預讀提升并發性能;

(3)HDFS HDFS(Hadoop Distributed File System):是適用于硬件上的分布式文件 系統。作為是 Hadoop 的核心子項目,HDFS 具備海量數據存儲、高容錯性以及 大文件存儲的優勢。

HDFS 的特點如下: 1) 適用于大文件、大數據處理,處理數據達到GB、TB、甚至 PB 級別的數 據; 2) HardLoop1.X 版本支持 NameNode 及 Secondary NameNode, Secondary NameNode會周期性的將fsimage和edits合并,然后將最新的fsimage推送給NameNode; 3) HardLoop2.0 版本支持 Standby NameNode,采用主從備份架構,對 Active NameNode 進行熱備份; 4) 多副本保護提高容錯性;5) 不支持并發,同一時刻只允許一個寫入者或追加者。

(4)GlusterFS GlusterFS(Gluster File System):是一種Scale-out的文件存儲系統, 具具備強大的橫向擴展能力,支撐數PB存儲容量以及處理數千應用客戶端的優 勢。

GlusterFS的特點如下: 1) 采用無中心對稱式架構,不存在元數據服務器瓶頸,元數據存在于文件 的屬性和擴展屬性中; 2) 采用彈性哈希算法,具有很好的可擴展性; 3) 采用模塊化堆棧架構,可實現靈活配置。

(5)SWIFT :SWIFT最初是由Rackspace公司開發的分布式對象存儲服務,采用完全對稱、面向資源的分布式系統架構設計,所有組件都具備擴展性,降低因單點失效而影響整個系統的可用性的效率,主要用于解決非結構化數據存儲問題。

SWIFT的特點如下:1) 原生的對象存儲,不支持實時的文件讀寫、編輯功能; 2) 完全對稱架構,無主節點,無單點故障,易于大規模擴展,性能容量線性增長; 3) 數據實現最終一致性,不需要所有副本寫入即可返回,讀取數據時需要 進行數據副本的校驗。

以上就是有關于分布式存儲平臺的定義及龍頭平臺的全部介紹,如果還想了解更多分布式存儲平臺的相關內容,敬請關注三個皮匠報告網站。

推薦閱讀

什么是分布式存儲?技術有哪些?與傳統存儲的區別

什么是分布式數據庫?分類有哪些?特點是?

什么是分布式光伏電站?特點有哪些?現狀分析

本文由作者AG發布,版權歸原作者所有,禁止轉載。本文僅代表作者個人觀點,與本網無關。本文文字的真實性、完整性、及時性本站不作任何保證或承諾,請讀者僅作參考,并請自行核實相關內容。

相關報告

江西中天智能裝備股份有限公司招股說明書(404頁).pdf
江西中天智能裝備股份有限公司招股說明書(404頁).pdf

公司因投資規劃和長期發展的需要或者行業監管政策、自身經營情況、外部經營環境發生重大變化而確需調整利潤分配政策的,調整后的利潤分配政策不得違反中國證監會和深圳證券交易所的有關規定。有關調整利潤分配政策的議案需經公司董事會、監事會審議通過后方能提交股東大會審議,獨立董事應當對利潤分配政策的調整發表獨立意見。同時

NVIDIA Jetson 助力智能車輛裝備領域的人工智能應用.pdf
NVIDIA Jetson 助力智能車輛裝備領域的人工智能應用.pdf

二二年十二月 NVIDIA JetsonNVIDIA Jetson助力助力 智能車輛裝備領域的人工智能應用智能車輛裝備領域的人工智能應用 Dedicated to AI Fundamental Research and Application Development 深蘭科技 致力于人工智能基礎研究和應用開

江西百勝智能科技股份有限公司招股說明書(696頁).pdf
江西百勝智能科技股份有限公司招股說明書(696頁).pdf

2015 年國家發展和改革委員會、財政部、國土資源部、住房和城鄉建設部、交通運輸部、公安部、中國銀行業監督管理委員會聯合印發了關于加強城市停車設施建設的指導意見(發改基礎【2015】1788 號)以來,國家、各地政府、各相關部門出臺了一系列法規和政策,從財稅政策、投融資政策、研究開發政策、進出口政策、人才政

2021年智能制造總體與汽車裝備智能化趨勢分析報告(17頁).pdf
2021年智能制造總體與汽車裝備智能化趨勢分析報告(17頁).pdf

汽車制造智能裝備可進一步劃分為:汽車零部件智能裝備和汽車整車制 造智能裝備,以及近期興起的汽車電子智能裝備。根據制造環節特點可進一 步細分:汽車零部件相關的,數控刀具系統、熱處理系統、金屬切削機床生 產線、精密鍛造生產線、測試設備系統、激光焊接設備、動力總成裝配設備, 等等;汽車整車相關的有“四大工藝裝備”

【研報】智能制造行業系列之二:智能制造重要領域汽車制造智能裝備面臨拐點-210324(19頁).pdf
【研報】智能制造行業系列之二:智能制造重要領域汽車制造智能裝備面臨拐點-210324(19頁).pdf

江蘇北人(688218.SH)汽車智能裝備柔性自動化生產線江蘇北人,在柔性精益自動化產線設計、先進制造工藝集成應用、產線虛擬設計與仿真、工業控制與信息化、生產過程智能化 5 個方面擁有核心技術,且均已成功應用于公司主要產品中。1、柔性自動化焊接生產線根據產能、節拍、投入等客戶差異化需求,公司產品類型主要包括

工信部裝備工業一司:智能工廠案例集(348頁).pdf
工信部裝備工業一司:智能工廠案例集(348頁).pdf

智能制造發展探索 智能工廠案例集 (一) 裝備工業一司 2021 年 4 月 目 錄 III 目 錄 案例 1 上汽大通汽車有限公司 001 上汽大通 C2B 模式打造智能制造標桿工廠 001 案例 2 濰柴動力股份有限公司 019 發動機行業全業務域智能制造實踐 019 案例 3 徐州重型機械有限公司 0

先導智能-以鋰電裝備為引領打造全球領先的智能制造整體解決方案-210910(51頁).pdf
先導智能-以鋰電裝備為引領打造全球領先的智能制造整體解決方案-210910(51頁).pdf

海外汽車消費的電動化率也在不斷提升。歐洲汽車制造商協會數據顯示,2020 年歐洲 30 國實現新能源乘用車注冊量 136.4 萬輛,同比增長 143.8%,電動化率從 2019 年的 3.5%提至 11.5%。美國汽車創新聯盟數據顯示,2020 年美國新能源輕型車實現銷量 31.9 萬輛,同比持平,電動化率

智能物流裝備行業深度報告:智能物流大勢已明星火燎原指日可待-210901(29頁).pdf
智能物流裝備行業深度報告:智能物流大勢已明星火燎原指日可待-210901(29頁).pdf

今天國際傳統下游客戶主要為煙草行業客戶,整體毛利率較高,但為了不斷開拓自動化物流系統應用領域,公司積極開拓非煙草行業客戶,非煙草行業客戶收入占比上升,對綜合毛利率造成一定影響,以2019 年為例,公司煙草行業毛利率為36.9%,新能源行業毛利率為 28.8%,但整體仍維持在 30%上下。新行業的拓展帶來了營

客服
商務合作
小程序
服務號
折疊
午夜网日韩中文字幕,日韩Av中文字幕久久,亚洲中文字幕在线一区二区,最新中文字幕在线视频网站