基于IBA的SRP Target的研究與實現(xiàn)
加入技術交流群
(1)SRP Target的端口檢測RDMA通道中有SRP請求信息，確認為接收完成操作失敗，未接收到SRP請求信息，立即進行操作失敗下的處理方式。
(2)釋放RDMA緩沖區(qū)相關資源，重新初始化相關屬性信息。
2．5 卸載SRPTarget
當進行卸載SRP Target時，主要進行釋放SRP Target模塊和SCSI模塊所占有資源。具體的步驟如下：
(1)注銷SCSI Target模塊中的I／O控制器，清除該控制器的設備ID號，將該控制器從全局上下文中移除。
(2)清I／O控制器所控制的SCSI命令，釋放SCSI命令所占有的內(nèi)存緩沖區(qū)等資源。釋放所占有的內(nèi)存緩沖區(qū)。
(3)釋放SRP Target模塊中I／O控制器所占有的資源，停止對IB端口服務人口的監(jiān)聽操作，釋放服務入口所占有的內(nèi)存空間資源，并對IB端口進行更新操作，恢復端口的初始設置。
(4)對所有RDMA通道進行斷開操作．釋放RDMA通道所占有的資源。
(5)釋放IB I／O控制器所占有的空間。本文引用地址：http://www.butianyuan.cn/article/202676.htm
3 實驗結果與分析
3．1 實驗環(huán)境
(1)硬件配置：
神威SWIBS24型IBA交換機。
IBM System x3650服務器3臺(Initiator01，Initiator02，Initiator03)各配有一塊HCA卡，作為SRP Initiator。存儲服務器一臺配置一塊HCA卡。作為SRP Target。
(2)軟件配置：
四臺linux AS4 Updata4服務器．內(nèi)核版本為2．6．9-42。Initiator01、Initiator02、Initiator03安裝IBA驅(qū)動程序IBGD(InfiniBand Gold Distribution)的sRP Initiator，作為Initiator服務器；Target安裝IBA驅(qū)動程序OFED(OpenFabrics En-terprise Distribution)的SRP Target，作為Target服務器。本課題依據(jù)GPFS支持的直接連接、網(wǎng)絡連接兩個模式，分別對讀寫性能進行比較。
直接連接：使用SRP協(xié)議．只要求在Initiator01、02、03服務器上安裝GPFS，Target上不安裝GPFS，Initiator服務器由1B網(wǎng)絡通過SRP Target獲得RAID存儲設備信息，即可對其進行直接掛載、讀寫操作。
網(wǎng)絡連接：不使用SRP協(xié)議．使用IPoIB協(xié)議。要求在每個服務器上都安裝GPFS，Initiator服務器不能通過SRP協(xié)議獲取Target服務器上RAID存儲設備的信，g。Initiator只能通過IPoIB與Target聯(lián)系，通過Target服務器上的GPFS文件系統(tǒng)對存儲設備進行共享訪問。
3．2 實驗結果
下表為實驗結果，IPoIB為GPFS的網(wǎng)絡連接模式，IB-SRP為GPFS的直接連接模式：
(1)Initiator01、02、03同時對Target的RAID設備進行讀寫操作(如表1)。設置測試的空間大小為10 G，一次讀寫操作的塊大小分別為64 k，128 k，256 k，速度以K／s為單位。
(2)Initiator01對Target的RAID設備單獨進行讀寫測試(如表2)。
3．3 結果分析
實驗結果表明，在IBA網(wǎng)絡中使用SRP協(xié)議的Initiator和Target模塊進行數(shù)據(jù)傳輸?shù)乃俣缺葐渭兪褂肐BA網(wǎng)絡進行數(shù)據(jù)傳輸?shù)乃俣雀叱龊芏唷?br /> 使用SRP協(xié)議進行數(shù)據(jù)傳輸時，Initiator服務器向Tar―get服務器的RAID設備傳輸數(shù)據(jù)，是直接與Target內(nèi)存進行數(shù)據(jù)傳輸，然后由Target的內(nèi)存將數(shù)據(jù)傳遞給RAID設備。在此時，Target系統(tǒng)并不執(zhí)行數(shù)據(jù)的拷貝動作，不經(jīng)過內(nèi)核的調(diào)用，減少了處理網(wǎng)絡通信時在內(nèi)核空間和用戶空間上下文切換的次數(shù)，消除了在應用內(nèi)存與內(nèi)核內(nèi)存之間復制數(shù)據(jù)的需要，減少了CPU的負載。繞過內(nèi)核可使應用程序不必執(zhí)行內(nèi)核調(diào)用就可以直接發(fā)出命令。減少了延遲時間，能騰出總線空間和CPU周期用于改進應用系統(tǒng)性能。然而只利用IBA網(wǎng)絡進行數(shù)據(jù)傳輸時。Target系統(tǒng)要進行數(shù)據(jù)的拷貝．內(nèi)核的調(diào)用，增大了CPU的負載．性能相對下降。所以基于SRP的讀寫速度性能會更高。
4 結束語
本文介紹了實現(xiàn)SRP Target的過程．對各個獨立功能部分的工作原理、工作機制以及工作流程進行了分析。并給出了IBA存儲網(wǎng)絡分別使用IPOIB協(xié)議和SRP協(xié)議讀寫性能的測試結果，對于設計實現(xiàn)基于IBA的存儲網(wǎng)絡有著重要的參考價值。
評論