新聞中心

EEPW首頁 > 嵌入式系統(tǒng) > 設(shè)計應(yīng)用 > 盤點網(wǎng)絡(luò)存儲技術(shù) 你都了解嗎

盤點網(wǎng)絡(luò)存儲技術(shù) 你都了解嗎

作者: 時間:2018-08-06 來源:網(wǎng)絡(luò) 收藏

在以數(shù)據(jù)為中心的信息時代,存儲已成為IT基礎(chǔ)設(shè)施的核心之一。數(shù)據(jù)存儲已經(jīng)成為繼互聯(lián)網(wǎng)熱潮之后的又一次技術(shù)浪潮,它將網(wǎng)絡(luò)帶入了以數(shù)據(jù)為中心的時代。

本文引用地址:http://www.butianyuan.cn/article/201808/385500.htm

由于近年來C/S計算模型的廣泛采用,服務(wù)器都帶有自己的存儲系統(tǒng),信息分散到各個服務(wù)器上,形成了所謂的“信息孤島”,不利于信息整合與數(shù)據(jù)共享。而網(wǎng)絡(luò)存儲就是一種利于信息整合與數(shù)據(jù)共享,且易于管理的、安全的新型存儲結(jié)構(gòu)和技術(shù)。目前,網(wǎng)絡(luò)存儲已經(jīng)成為一種新的,本文將從體系結(jié)構(gòu)的角度簡述目前的存儲系統(tǒng)。

直接連接存儲DAS

直接連接存儲DAS(Direct Attached Storage)是對SCSI總線的進一步發(fā)展。它對外利用SCSI總線通道和多個主機連接,解決了SCSI卡只能連接到一個主機上的缺陷。對內(nèi)利用SCSI總線通道或FC通道、IDE接口連接多個磁盤,并實現(xiàn)RAID技術(shù),形成一個磁盤陣列,從而解決了數(shù)據(jù)容錯、大存儲空間的問題。

DAS是以服務(wù)器為中心的存儲體系結(jié)構(gòu),難以滿足現(xiàn)代存儲應(yīng)用大容量、高可靠、高可用、高性能、動態(tài)可擴展、易維護和開放性等多方面的需求。解決這一問題的關(guān)鍵是將訪問模式從以服務(wù)器為中心轉(zhuǎn)化為以數(shù)據(jù)和網(wǎng)絡(luò)為中心,實現(xiàn)擴展容量、增加性能和延伸距離,尤其是實現(xiàn)多個主機數(shù)據(jù)的共享,這推動了存儲與計算的分離,即網(wǎng)絡(luò)存儲的發(fā)展。

網(wǎng)絡(luò)附屬存儲NAS

NAS(附網(wǎng)存儲系統(tǒng))系統(tǒng)是用一個裝有優(yōu)化的文件系統(tǒng)和瘦操作系統(tǒng)的專用數(shù)據(jù)存儲服務(wù)器,提供跨平臺的文件共享功能。NAS產(chǎn)品與客戶之間的通訊采用NFS(Network File System)協(xié)議、CIFS(Common Internet File System)協(xié)議,這些協(xié)議運行在IP之上。。

盡管NAS集成了系統(tǒng)、存儲和網(wǎng)絡(luò)技術(shù),具有擴展性強、使用與管理簡單、跨平臺文件共享、性能優(yōu)化等特點。然而,NAS系統(tǒng)也有其潛在的局限性。首先是它受限的數(shù)據(jù)庫支持,NAS文件服務(wù)器不支持需大量依賴于數(shù)據(jù)庫處理結(jié)果的應(yīng)用(塊級應(yīng)用)。其次是缺乏靈活性,它是一種專用設(shè)備。最后,NAS備份與恢復(fù)的實現(xiàn)相當(dāng)困難。

存儲區(qū)域網(wǎng)SAN

SAN(存儲區(qū)域網(wǎng))是通過專用高速網(wǎng)將一個或多個網(wǎng)絡(luò)存儲設(shè)備(如磁盤陣列RAID)和服務(wù)器連接起來的專用存儲系統(tǒng)。

SAN以數(shù)據(jù)存儲為中心,采用可伸縮的網(wǎng)絡(luò)拓撲結(jié)構(gòu),提供SAN內(nèi)部任意節(jié)點之間的多路可選擇的數(shù)據(jù)交換,并且將數(shù)據(jù)存儲管理集中在相對獨立的存儲區(qū)域網(wǎng)內(nèi),實現(xiàn)最大限度的數(shù)據(jù)共享和數(shù)據(jù)優(yōu)化管理,以及系統(tǒng)的無縫擴充。正是由于光纖通道技術(shù)的發(fā)展,使得SAN得以支持遠距離通信、易于擴展、能夠解決網(wǎng)絡(luò)數(shù)據(jù)的存儲備份、高可用性、災(zāi)難恢復(fù)等有關(guān)問題,它可以提供高性能數(shù)據(jù)管道和共享的集中管理的存儲設(shè)備。因此采用網(wǎng)絡(luò)和通道技術(shù)相互融合的光纖通道接口的SAN將LAN上的存儲轉(zhuǎn)換到主要由存儲設(shè)備組成的專用網(wǎng)絡(luò)上,使得數(shù)據(jù)的訪問、備份和恢復(fù)不影響LAN的性能,在大量數(shù)據(jù)訪問時,不會大幅度降低網(wǎng)絡(luò)性能。

SAN主要用于存儲量大的工作環(huán)境,并且SAN的適用性和通用性較差,在系統(tǒng)的安裝和升級方面效率不高,且由于SAN使用專用網(wǎng)絡(luò)(一般為光纖網(wǎng)絡(luò)),相應(yīng)的設(shè)備價格昂貴,總體實現(xiàn)費用較高,局限于大中型應(yīng)用。

NAS和SAN技術(shù)都體現(xiàn)了數(shù)據(jù)存儲從傳統(tǒng)的服務(wù)器中獨立出來的思想,它們是網(wǎng)絡(luò)存儲領(lǐng)域中的兩個發(fā)展方向。隨著NAS和SAN之間的界限越來越模糊,其中更重要的區(qū)別可能就是在NAS/SAN混合系統(tǒng)中所采用的協(xié)議了:IP、光纖通道,或者iSCSI等。

IP存儲

傳統(tǒng)的SAN一般采用光纖通道技術(shù),其成本高,距離受限制,因此基于IP的存儲正成為一個新的熱點,主要有FCIP(Fibre Channel over IP)、iFCP(Internet Fibre Channel Protocol)、mFCP(Metro Fibre Channel Protocol)、iSCSI(Internet SCSI)等技術(shù)。

上述協(xié)議有一個非常重要的共同點:都能充當(dāng)SCSI命令集的傳輸機制。通過IP存儲介質(zhì)與存儲設(shè)備通信的主機仍能表達SCSI的含意。而iSCSI則是從主機到存儲設(shè)備的整個傳輸鏈路就是一條IP鏈路,沒有采用光纖通道,基于主機的應(yīng)用通過IP與網(wǎng)絡(luò)存儲設(shè)備通信。iSCSI保持了SCSI命令集的原狀,同時用IP取代了傳輸協(xié)議。但由于iSCSI通過映射至IP來保留SCSI命令集,存在延時問題,已有專門的iSCSI芯片組把轉(zhuǎn)換代碼部署在硬件當(dāng)中。IP-SAN的優(yōu)勢在于:容易擴展成超大規(guī)模的存儲網(wǎng)絡(luò);不必受光纖通道SAN的距離限制,連接在IP網(wǎng)絡(luò)上的服務(wù)器都能享用網(wǎng)絡(luò)存儲服務(wù);連接靈活多樣,廉價成熟的網(wǎng)絡(luò)架構(gòu)成本,使得高端也能達到Gbps速率,有較高的性能價格比。

集群存儲

由于目前一些存儲應(yīng)用受容量可擴展性、性能可擴展性、可用性、可管理性的挑戰(zhàn),“催生”了許多存儲集群系統(tǒng)的產(chǎn)生。集群存儲是將每個存儲設(shè)備作為一個存儲節(jié)點,通過高速互聯(lián)網(wǎng)絡(luò)連接起來,將數(shù)據(jù)分散開存儲在多臺獨立的設(shè)備上,這些設(shè)備可以獨立運作,相互之間又可以合作。每個I/O節(jié)點不僅可以訪問本節(jié)點的存儲空間,還可以訪問其他節(jié)點的存儲空間。所有存儲節(jié)點的空間以一個虛擬磁盤的方式提供給客戶端用戶。組成集群存儲可以是塊級別的SAN集群、文件級別的NAS集群和并行文件系統(tǒng)的集群,它們的訪問、特征與適用環(huán)境參見表1。

集群存儲有效地提升了存儲設(shè)備的容量可擴展性、性能穩(wěn)定性及系統(tǒng)可管理性。集群存儲非常適合那些持續(xù)增長的所有規(guī)模的不同環(huán)境,實現(xiàn)即時供應(yīng)(Just-in-time)存儲,避免破壞性升級和增加管理的復(fù)雜性。在大型數(shù)據(jù)中心或高性能計算中心的集群存儲解決方案,具有高性價比,簡單、易于維護,高可靠性/可用性,具有非常高的整合帶寬等優(yōu)點。集群存儲最典型系統(tǒng)是Google體系結(jié)構(gòu),它是大量機器內(nèi)硬盤的組合,含899個機架(每架80臺PC,每臺PC有2個硬盤),共79,112臺PC機,有158,224個硬盤, 總?cè)萘繛?180 TB。

對等(P2P)存儲

對等結(jié)構(gòu)(P2P)從用戶的使用方式來看,系統(tǒng)中每個用戶既向其他用戶提供資源,也從其他用戶那里獲取資源。從體系結(jié)構(gòu)來看,無中心結(jié)構(gòu),結(jié)點之間對等,通過互相合作來完成用戶任務(wù)。P2P結(jié)構(gòu)的優(yōu)點表現(xiàn)在:沒有中心結(jié)點,不易形成系統(tǒng)瓶頸、不易受攻擊,可擴展性好,自組織性好。

用P2P的方式在廣域網(wǎng)中構(gòu)建大規(guī)模分布式存儲系統(tǒng),將很多機器用對等的方式組織起來共同為用戶提供超大容量的數(shù)據(jù)存儲服務(wù),存儲結(jié)點來自于存儲服務(wù)方,用戶使用存儲空間并付費,用戶還通過該平臺自主尋找其他結(jié)點進行數(shù)據(jù)備份和存儲空間交換。

P2P存儲與SAN的應(yīng)用特點不同。前者主要強調(diào)可用性,而SAN主要面向的是高性能;P2P存儲易于維護、可擴展好、自配置功能強,特別是P2P存儲可以大量加盟的PC機和服務(wù)器中的存儲器來組合成存儲系統(tǒng),提供高帶寬的視頻服務(wù)和其他共享服務(wù)。

集群存儲與P2P存儲都是分布式存儲。前者多在大型數(shù)據(jù)中心或高性能計算中心使用,后者是構(gòu)建更大規(guī)模的分布式存儲系統(tǒng),可以跨多個大型數(shù)據(jù)中心或高性能計算中心使用。

網(wǎng)格存儲

所有的存儲、服務(wù)器和網(wǎng)絡(luò)資源都被虛擬為一個資源池,并將其視作共享資源,這個資源池就是存儲網(wǎng)格。存儲網(wǎng)格的關(guān)鍵是虛擬化與統(tǒng)一性管理問題。

存儲網(wǎng)格既可應(yīng)用于SAN環(huán)境,又可應(yīng)用于NAS環(huán)境,它提供快速簡單的對于容量、性能、服務(wù)質(zhì)量和/或連接協(xié)議的可升級性,可對公司所有數(shù)據(jù)進行統(tǒng)一查看和管理,遠遠超出當(dāng)前有限的虛擬化實現(xiàn)途徑,還可優(yōu)化分布式企業(yè)遠程數(shù)據(jù)訪問的性能。存儲網(wǎng)格架構(gòu)可實現(xiàn)數(shù)據(jù)庫和企業(yè)之間更緊密的應(yīng)用整合,提供更高的數(shù)據(jù)保護,并可基于有關(guān)規(guī)定更簡單地管理數(shù)據(jù)資源。這些優(yōu)勢極大降低了用戶在購買、擴容和管理時的費用。

面向?qū)ο蟮拇鎯?/strong>

對象存儲模型綜合了NAS和SAN結(jié)構(gòu)的特點,存儲對象具有文件和塊二者的優(yōu)點:像數(shù)據(jù)塊一樣在存儲設(shè)備上被直接訪問,通過一個對象接口,像文件一樣,在不同操作系統(tǒng)平臺上實現(xiàn)數(shù)據(jù)共享。在SAN中,定位邏輯和文件系統(tǒng)都位于主機中。而在面向?qū)ο蟮拇鎯χ校鎯臻g不再需要運行在主機上的文件系統(tǒng)管理,而由存儲系統(tǒng)自己管理和分配。

一個存儲對象是關(guān)于一個存儲設(shè)備的邏輯字節(jié)集合,它有存儲方法、數(shù)據(jù)屬性和存儲安全策略等。因此,對象存儲系統(tǒng)在基于文件級的數(shù)據(jù)布局、服務(wù)質(zhì)量的靈活性和可管理等方面有很大改善。另外,基于對象存儲的最直接效果是將空間管理從存儲應(yīng)用中剝離,如圖2所示,存儲設(shè)備具有自管理特性,包括重新組織數(shù)據(jù)來提高性能、調(diào)用規(guī)則的備份和失敗恢復(fù)等。

未來存儲設(shè)備的特性可能包括自配置、自保護、自優(yōu)化、自恢復(fù)和自管理。將塊接口用對象來代替是一個發(fā)展方向。目前,面向?qū)ο蟮拇鎯θ匀惶幵跇藴手贫ㄖ?,還沒有得到廣泛的接受。

內(nèi)容尋址存儲CAS

內(nèi)容尋址存儲(Content Addressed Storage,CAS)是針對固定內(nèi)容存儲需求的網(wǎng)絡(luò)。CAS具有面向?qū)ο蟠鎯μ卣鳎诖庞涗浖夹g(shù),它按照所存儲數(shù)據(jù)內(nèi)容的數(shù)字指紋尋址,具有良好的可搜索性、安全性、可靠性和擴展性。CAS、SAN和NAS的區(qū)別參見表2。CAS的代表性產(chǎn)品是EMC公司的Centera 系統(tǒng),目前還具有非常多的局限性。

數(shù)據(jù)庫只針對的是結(jié)構(gòu)化數(shù)據(jù),而大量非結(jié)構(gòu)化的數(shù)據(jù)管理有更大的存儲需求,而內(nèi)容管理的對象是以各類非結(jié)構(gòu)化數(shù)據(jù)為主的數(shù)字內(nèi)容。CAS技術(shù)的出現(xiàn)使非結(jié)構(gòu)化數(shù)據(jù)管理(包括企業(yè)的各種文檔、報表、賬單、網(wǎng)頁、圖片、傳真、掃描影像,以及大量的多媒體音頻、視頻信息等等的歸檔和查詢)成為存儲業(yè)新的熱點。未來需要一種新的基于內(nèi)容管理的存儲系統(tǒng)平臺,它擴展了最新的對象存儲體系結(jié)構(gòu),支持對象倉儲和聯(lián)邦數(shù)據(jù)庫技術(shù),支持關(guān)系和 XML作為主要數(shù)據(jù)模型,并緊密地集成了內(nèi)容管理服務(wù)、工作流、消息傳遞、分析和其他企業(yè)應(yīng)用程序服務(wù)。

基于IB的存儲

InfiniBand(IB)是針對處理器和智能I/O設(shè)備之間數(shù)據(jù)流而提出的一種新體系結(jié)構(gòu),用于在服務(wù)器中取代PCI總線。采用IB技術(shù)支持多處理器集群,將允許服務(wù)器提供更高的帶寬和可擴展能力,并增強了存儲設(shè)備擴充的靈活性,并用于支持遠程I/O和遠程存儲器,如圖3所示。IB作為一種能夠為系統(tǒng)與存儲之間提供低延遲和高帶寬的連接解決方案,已經(jīng)為一些用戶所接受,預(yù)期基于IB的存儲將在存儲領(lǐng)域會占有一席之地。



關(guān)鍵詞: 存儲技術(shù)

評論


相關(guān)推薦

技術(shù)專區(qū)

關(guān)閉