一、引言
著網絡基礎技術在不斷發展,數據信息近年來呈現了暴漲的姿勢。我們都很熟悉結構化數據,典型的就是事務數據、定量的數據。企業收集、存儲、查詢、利用它們來制定商業戰略、預判趨勢、運行報表、進行分析、優化運營。企業在結構化數據的利用方面已經做得很好,通過它能提供重要的業務洞察力,更有效率和有效益地服務于客戶,遵循監管法規,為決策制定者提供所需的即時的、持續的關鍵信息以優化業務。但今天,許多企業已經意識到,結構化數據僅僅是企業所擁有數據的一小部分。與業務信息系統中大量用于交易記錄、流程控制和統計分析的結構化數據相比,非結構化數據具有某種特定和持續的價值,這種價值在共享、檢索、分析等使用過程中得以產生和放大,并最終對企業業務和戰略產生影響。像電子商務、移動應用、社交網絡等日益活躍,這導致大量的像影像資料、辦公文檔、掃描文件、Web 頁面、電子郵件、微博、即時通信以及音視頻等非結構化數據迎面而來,企業應接不暇。
統計,企業中20%的數據是結構化的,80%則是非結構化或半結構化的。當今世界結構化數據增長率大概是32%,而非結構化數據增長則是63%,至2012年,非結構化數據占有比例將達到互聯網整個數據量的75%以上。非結構分數據的快速增長,企業要將這些數據存儲更長時間的保存,須要求存儲底層架構能擴展、管理、并保證該類數據在其生命周期內得到有效的保護。這種大規模的非結構化數據快速增長的現象,對一個企業提出了新的挑戰。
二、需求分析
DFT針對企業的非結構化數據存儲做了仔細的調研分析,通常不外乎以下三種情況:
1. 數據越來越多,存儲系統負荷越來越重、越來越復雜,給IT管理人員帶來了更大的工作量和工作難度,因此企業必須在數據管理和維護方面提高成本,繁雜的數據出差錯的可能性越來越大,同時也為企業的運營帶來的一定風險。
2. 由于歷史的原因,很多企業使用的是不同廠商的硬件和軟件產品,且彼此不能兼容。多平臺的數據融合統一存儲難以實現,給重要數據實現備份和歸檔帶來了復雜度,數據的安全性得不到保障。
3. 一些大型企業在各部門內形成了信息孤島,在部門之間的沒實現信息共享,并且出現了存儲資源調用問題,造成一些部門的存儲空間不夠用,一些部門的存儲空間空閑浪費。
綜上所述,其中的問題在存儲技術方面表現以下幾個關鍵點:
a) 儲空間與性能不能隨快速增長的企業需求而擴展;
b) 數據的增加勢必增加高昂的基礎架構成本,以及長期的保留和管理成本;
c) 大量的非結構化數據沒得到有效管理將造成難以在有限時間期內找到并檢索到關鍵信息;
d) 由于存儲上的過期數據數量增加,導致在主存儲系統上的備份窗口增加,且無法將數據移動到歸檔層;
e) 除了難以管理以外,也不容易增加新的設備或更新設備。
三、解決方案
這一系列問題的一個辦法,便是在用戶端電腦與存儲之間插入一個虛擬層,透過虛擬層的中介來管理前后端的存取連接。NS U6000系列是DFT最新推出的一款適用于中高端集群存儲應用需求的功能豐富的網絡存儲設備。該產品在同一存儲平臺中,既提供了文件級存儲的NAS功能,同時也提供數據塊級別的IP-SAN或FC-SAN存儲架構,其功能的多樣性使得用戶的前期投入成本得到了保護。NS U6000系列提供了可視化圖形管理界面,操作簡單易于管理,其高性能、靈活性及高可靠性完全滿足用戶對數據及文件存儲性能的要求。該產品主要適用于高性能運算,大型視頻監控、大、中非編網、IPTV、VOD點播等應用。
方案中,建議采用兩臺U6000實現雙機熱備,來連接企業中現有的存儲設備(包括光纖存儲設備、NAS設備、iSCSI設備等異構存儲平臺),把所有的物理存儲空間虛擬成單獨的存儲池,管理者可把存儲池虛擬成多個卷分配給有需要的用戶,用戶所有的數據都是基于虛擬卷的操作,物理層的故障更換不影響虛擬層的使用。雙機熱備對于數據存取量較大且對數據讀寫速度要求較高的企業來說作用相當明顯,一來提升了整體性能,二來實現機器的容錯性。另外,用戶可利用U6000自帶的無限次快照以及插件形式的遠程復制功能實現重要數據的備份和容災。
四、方案特點
4.1 高可用性
本方案利用一款機型解決了企業異構存儲平臺有集中存儲需求的多種問題,通過NS U6000對NFS、CIFS、HTTP、FTP、iSCSI、FC等協議的支持,實現了企業異構存儲資源整合,同時也能提供FC,IP等主機接口,使用戶無間斷地訪問IP-SAN/FC-SAN/NAS共享數據,保證了數據訪問的通暢,解決了共享總線帶來的I/O讀寫瓶頸問題。
4.2 高性能
方案中U6000具有集群存儲特性,隨著U6000系統中節點的增加,性能呈線性增長,吞吐量達到GB級,支持使用SSD固態盤來提升數據的讀寫性能。
NS U6000自帶自動精簡功能充分有效地利用磁盤空間。管理員根據實際需要對用戶或用戶組分配存儲容量,設定每個用戶或一組用戶獨享的存儲空間或公用的存儲空間,合理地管理和利用磁盤空間。
NS 6000的負載均衡功能避免鏈路出現擁塞現象,極大地提高了存儲系統的數據讀寫性能。當用戶數據急劇增加而導致網絡寬帶堵塞時,只需增加網絡端口就可以將速度大幅提升。
4.3 高可靠性
從整體體上來看,此方案從多重角度為用戶提供了強大的數據安全性保證。NS6000系列安全控制主要通過三個層面實現:
在硬件層, U6000采用硬件冗余設計,支持硬盤、電源、風扇等多個部件熱插拔和全局動態熱備盤;另外,雙機熱備的方式除了提高I/O速度以外,還能實現機器的容錯,可謂雙重保險;
在系統層,DFT NAS管理軟件內置完整的故障監控系統,每時每刻監控各工作組件狀態,當系統出現異常時能自動進行檢測,并有多種報警通知方式;
在應用層,U6000支持快照與復制功能,這些功能為用戶數據提供了安全、可靠的存儲空間,確保了數據的安全性及完整性。另外,還支持RAID0,1(¬0+1),3,5,6,10,30,50,60 ,以及可同時允許壞三塊硬盤的DFT特有RAID技術,對數據提供全面的保護,避免因磁盤故障而丟失數據。
4.4 節約成本
本方案是針對于有數據集中存儲要求的用戶,NS6000是一體化解決方案的存儲產品。該產品為用戶提供了NAS及IP-SAN、FC-SAN三種網絡架構進行數據塊存儲,也可以通過CIFS/NFS/HTTP/FTP等網絡共享協議來訪問Windows、MAC與Linux操作系統下的文件共享。
即使將來有存儲的擴容和性能擴展的需求,只需要添加存儲擴展柜和功能插件的License,無須購買其它設備,方便快捷。
易用易管理性
該產品將文件服務與存儲應用整合于同一存儲平臺中,即使非專業存儲IT人員也可以靈活安裝,并進行功能選擇。
NS U6000提供的友好的基于瀏覽器的圖形用戶界面充分描述系統的運行狀態,方便用戶配置、監控和管理NAS存儲系統,管理軟件可以在本地或遠程設置,管理,監測和調整盤陣的運行。一旦故障發生,管理軟件將會自動通知用戶,使發生的問題輕易得到處理,保障系統持續運行。