時間:2022-01-27 18:15:52
序論:速發表網結合其深厚的文秘經驗,特別為您篩選了11篇企業數據存儲方案范文。如果您需要更多原創資料,歡迎隨時與我們的客服老師聯系,希望您能從中汲取靈感和知識!
大數據存儲不是一類單獨的產品,它有很多實現方式。EMC Isilon存儲事業部總經理楊蘭江概括說,大數據存儲應該具有以下一些特性:海量數據存儲能力,可輕松管理PB級乃至數十PB的存儲容量;具有全局命名空間,所有應用可以看到統一的文件系統視圖;支持標準接口,應用無需修改可直接運行,并提供API接口進行面向對象的管理;讀寫性能優異,聚合帶寬高達數GB乃至數十GB;易于管理維護,無需中斷業務即可輕松實現動態擴展;基于開放架構,可以運行于任何開放架構的硬件之上;具有多級數據冗余,支持硬件與軟件冗余保護,數據具有高可靠性;采用多級存儲備份,可靈活支持SSD、SAS、SATA和磁帶庫的統一管理。
通過與中國用戶的接觸,楊蘭江認為,當前中國用戶最迫切需要了解的是大數據存儲有哪些分類,而在大數據應用方面面臨的最大障礙就是如何在眾多平臺中找到適合自己的解決方案。
EMC針對不同的應用需求可以提供不同的解決方案:對于能源、媒體、生命科學、醫療影像、GIS、視頻監控、HPC應用、某些歸檔應用等,EMC會首推以Isilon存儲為核心的大數據存儲解決方案;對于虛擬化以及具有很多小文件的應用,EMC將首推以VNX、XtremIO為核心的大數據存儲解決方案;對于大數據分析一類的應用需求,EMC會綜合考慮客戶的具體需求,推薦Pivotal、Isilon等一體化的解決方案。在此,具體介紹一下EMC用于大數據的橫向擴展NAS解決方案——EMC Isilon,其設計目標是簡化對大數據存儲基礎架構的管理,為大數據提供靈活的可擴展平臺,進一步提高大數據存儲的效率,降低成本。
EMC Isilon存儲解決方案主要包括三部分:EMC Isilon平臺節點和加速器,可從單個文件系統進行大數據存儲,從而服務于 I/O 密集型應用程序、存儲和近線歸檔;EMC Isilon基礎架構軟件是一個強大的工具,可幫助用戶在大數據環境中保護數據、控制成本并優化存儲資源和系統性能;EMC Isilon OneFS操作系統可在集群中跨節點智能地整合文件系統、卷管理器和數據保護功能。
楊蘭江表示,企業用戶選擇EMC Isilon的理由可以歸納為以下幾點。第一,簡化管理,增強易用性。與傳統NAS相比,無論未來存儲容量、性能增加到何種程度,EMC Isilon的安裝、管理和擴展都會保持其簡單性。第二,強大的可擴展性。EMC Isilon可以滿足非結構化數據的存儲和分析需求,單個文件系統和卷中每個集群的容量為18TB~15PB。第三,更高的處理效率,更低的成本。EMC Isilon在單個共享存儲池中的利用率超過80%,而EMC Isilon SmartPools軟件可進一步優化資源,提供自動存儲分層,保證存儲的高性能、經濟性。第四,靈活的互操作性。EMC Isilon支持眾多行業標準,簡化工作流。它還提供了API可以向客戶和ISV提供OneFS控制接口,提供Isilon集群的自動化、協調和資源調配能力。
EMC Isilon大數據存儲解決方案已經在醫療、制造、高校和科研機構中有了許多成功應用。
方案點評
EMC Isilon是一個強大但簡單的橫向擴展NAS方案,適用于希望投資數據管理而不是單純存儲的企業。當初,EMC將收購來的分布式數據倉庫軟件廠商Greenplum的軟件與Isilon存儲組合成了EMC最早的大數據解決方案。用戶既可以分開選擇Greenplum軟件或Isilon存儲,也可以選擇由Greenplum軟件和Isilon存儲組成的一體機解決方案。現在,Greenplum軟件雖然已歸Pivotal公司,但EMC是Pivotal的經銷商與合作伙伴,Greenplum與Isilon存儲的組合方案并不會因此受到影響。
HDS UCP:統一平臺 應用優化
HDS中國區解決方案與專業服務事業部總監陳戈認為,大數據存儲應該是一個解決方案:“大數據解決方案是由基礎架構的各部件組成的,包含數據存儲、計算和分析,而存儲是此架構中的一部分。”
大數據的存儲類型與傳統的存儲類型有一定區別:在大數據存儲中,更多的應用是一次寫、多次讀,讀得更多是大數據存儲的一個特點,而在傳統的數據存儲中,讀寫是隨機的,由于每個應用不同,其讀寫的比例也是隨機的;大數據存儲需要具有橫向的可擴展性,并可支持多種接口、多種數據訪問協議,便于不同數據進入這個大數據平臺。
談到中國用戶在大數據存儲應用中最迫切的需求是什么,陳戈認為,中國用戶最迫切的需求是如何逐步實現大數據應用,即用戶從現有的模式如何過渡到大數據,如何更好地利用大數據進行經營分析。
大數據的經典定義可以歸納為四個“V”,但企業不可能一步到位實現四個“V”,這需要一個循序漸進的過程。海量的、多種類型的數據是一次性全部載入到大數據中,還是通過現有的平臺進行數據初選,再導入到大數據平臺中,是兩種不同的實現途徑?!跋韧ㄟ^現有平臺進行數據初選,再導入到大數據平臺,這種方式更適合于客戶逐漸實現大數據,可以縮短用戶實現大數據應用的時間?!标惛瓯硎?,“大數據主要是非結構化數據。用戶可以使用基于對象數據存儲的HCP,利用其獨特的元數據采集和智能工具,對非結構化文件數據進行管理,實現智能的自動化,這有助于對數據進行深度分析,幫助客戶從單一系統中存儲、共享、同步、保護、保存、分析和檢索文件數據,減少垃圾數據,進而為大數據分析建立一個良好的基礎?!?/p>
談到用戶在大數據應用中遇到的主要障礙,陳戈表示,一方面,應用軟件本身的智能程度是否能滿足行業應用需求,應用軟件是否已經成型,大數據人才是否具備等,是讓大數據應用落地的關鍵;另一方面,如何抽取數據,放在大數據平臺中進行相應的計算是另一個關鍵問題。
HDS可為所有數據提供單一、可擴展的虛擬化集成平臺。HDS推出了“三步”云戰略,從基礎架構、內容和信息三個層面幫助客戶解決目前所遇到的問題。具體來看,通過“基礎架構云”,HDS可以幫助客戶進行虛擬化和集成管理,實現數據中心的整合;在第二層的“內容云”當中,HDS可以按需提供內容,更可以不受應用限制地進行數據搜索和集成;在第三層的“信息云”中,針對所有數據類型,HDS在其存儲平臺中融入了分析功能,使客戶可以從數據信息中獲取洞察力。
HDS提供的UCP for SAP HANA集成了基于大量數據集的創新和內存分析技術,并提供實時的洞察力,從而使當前的信息驅動型企業可以加快其商業決策的速度。陳戈介紹說,UCP for SAP HANA解決方案結合了HDS刀片服務器技術、企業級存儲系統和業內領先的網絡組件,在這樣一個集成的、高性能的硬件平臺上可以快速交付SAP下一代內存計算技術。全球已有超過200家客戶在使用HDS和SAP的大數據解決方案。
方案點評
其實,HDS的“三步”云戰略也可以看成是其大數據戰略。HDS借助以UCP為核心的大數據平臺,可以幫助企業用戶構建從基礎架構到內容歸檔和搜索,直至信息提取和分析的全面、高效的大數據解決方案。HDS的“信息云”直接與大數據相關。UCP是一個集成了計算、存儲與網絡的一體化平臺,它既可以提供像一體機一樣的整合性、簡單性,又可以提供靈活的選擇,連接第三方的設備組件。HDS還通過與包括SAP在內的眾多大數據分析類的合作伙伴合作,針對行業定制優質的大數據解決方案。
HP StoreAll :快速部署 極速搜索
中國惠普有限公司企業集團存儲產品部存儲架構師張楠向記者表示,大數據存儲是一套解決方案,應該能夠對大數據的Volume、Velocity、Variety和Value四個方面提供全面的支持。
第一,大數據存儲要支持海量級的數據存儲,比如具有PB級的存儲能力。第二,大數據存儲要支持更高的存儲速度,支持10Gb甚至更高的網絡連接。第三,大數據存儲要支持數據的多樣性,如圖片、文本、視頻、音頻等。第四,大數據最重要的是價值的體現,而為了實現這一點,存儲本身應該具備快速、智能的數據檢索能力?!霸诖鎯Φ淖畹讓犹峁┳钪苯?、快捷的數據檢索。這一過程簡單說就是,將上層的數據挖掘工作下移,充分利用存儲強大的處理能力和數據識別能力。”張楠舉例說,“比如,在秒級的單位內對數據進行極速的搜索, 從幾千萬甚至上億個文件中找到目標數據。”
另外,模糊查詢能力也是大數據存儲不可缺少的功能。智能的模糊查詢將為大數據平臺提供更加便捷的存儲服務能力,使得存儲更像一臺智能的高速計算設備。
目前,很多中國用戶在存儲廠商的引導下,片面追求存儲的大容量和高性能,而忽略了大數據存儲本身應該提供的其他額外屬性。中國用戶在實施大數據的過程中經常遇到的障礙有以下兩方面:第一,無法將存儲與大數據平臺進行對接;第二,無法充分利用大數據存儲的價值,也很難將其運用到實際的業務中。張楠表示,究其原因,主要在于有些大數據存儲產品沒有開放的接口協議,或沒有針對用戶的大數據場景進行特別優化,也沒有用戶容易接受的易用的管理方式等。
惠普在大數據方面可以提供軟硬結合的解決方案?;萜赵谑召廇utonomy公司之后,將其軟件與惠普的硬件平臺進行了整合, 形成了一套完整的大數據解決方案。張楠介紹說,在存儲方面,惠普擁有像StoreAll這樣的大數據存儲平臺。借助HP StoreAll硬件平臺,用戶除了可以實現海量數據的存儲和高速數據訪問以外,還能實現高級的數據檢索功能,對特殊文件進行快速定位。同時,結合HP Autonomy軟件的特性,惠普還引入了模糊查詢、智能語義庫等概念,可以幫助企業用戶通過存儲底層為上層業務帶來所需的大數據業務價值。
如今,閃存不僅在大數據領域,而且在Tier 1存儲市場同樣占據著十分重要的地位。對于大數據平臺來說,閃存可用來提升存儲的存取速度,降低I/O的響應時間等。針對那些I/O壓力十分明確的大數據平臺, SSD可以發揮其效果, 提升存儲的整體性能。但是,SSD并不是萬能的。因為大部分的數據都是非結構化的,而非結構化數據對I/O的響應要求遠遠沒有對帶寬的需求大,所以,讓用戶花數倍的價格購買SSD存儲在目前來看還是比較困難的。從目前情況看,引入閃存的大數據解決方案還不是很普遍。
方案點評
惠普在大數據方面收購了兩個軟件公司Vertica與Autonomy,然后將它們的軟件與原有的硬件平臺進行整合,針對結構化和非結構化的數據都可以提供針對性的解決方案?;萜赵趯⒋髷祿浖c存儲硬件結合上也進行了嘗試,其中一個成功的例子就是HP StoreAll大數據存儲平臺。HP StoreAll具有以下特點:橫向擴展,最大可以擴展到16TB;集成HP Autonomy搜索引擎,可以快速搜索,實現實時大數據的價值;內置對OpenStack的支持,可快速部署;支持文件和對象類型的數據存儲。
NetApp:統一架構 無限擴展
如今,企業若想獲得成功,就必須想方設法應對具有前所未有的復雜性、高性能的海量數據,并盡可能地管理這些數據,從中發掘更大的商業價值。
對于國內用戶來說,無論企業的規模和數據量大小如何,運用大數據的關鍵在于,企業是否把大數據作為一個真正的工具,去體現企業的差異化,從而提升競爭力。隨著越來越智慧的企業信息化的發展,IT不再是束縛企業發展的瓶頸,而是真正地融入了企業自身的業務中。越來越多的公司將大數據成功地運用于企業的商業模式。例如,在歐美,很多企業已經著手將大量資源投放在大數據領域。反觀國內,在金融領域,有為數不少的企業通過大數據的分析工具來分析金融的走勢,實現風險管理,進行信用卡的追蹤等。此外,像零售、制造、電信等行業也已在嘗試利用大數據分析工具為企業營銷和決策提供支撐。
無論企業現在是否正在使用大數據工具,企業都應全面地考慮自身未來發展的需求,選擇一個廠家的平臺與之共同發展,這可以有效避免因數據和應用遷移帶來的麻煩。
在大數據方面,NetApp能夠幫助企業實現數據管理,應對業務挑戰的極限,將以數據為導向的洞察轉化為有效行動。若想將數據轉化為商機,僅僅提升管理能力是不夠的,需要徹底轉變數據和業務之間的聯系模式。NetApp可以幫助企業用戶持續管理數據,迅速把握意料之外的新商機,永久保存所有數據,并在靈活、開放的存儲平臺之上打造屬于企業自己的大數據解決方案。
NetApp提供了可高效處理、分析、管理和訪問大規模數據的大數據解決方案。NetApp的解決方案組合可劃分為分析、帶寬和內容三個主要用例,這被稱之為大數據的“ABC”基本要素。
具體來看,分析(Analysis)是指針對極大數據集的高效分析。NetApp分析解決方案就是幫助用戶深入了解和利用數字世界,將數據轉化為高質量的信息,以及提供關于業務的更深入見解,從而幫助企業做出更好的決策。
帶寬(Bandwidth)是指適用于數據密集型工作負載的性能。此類解決方案著重于為速度非??斓墓ぷ髫撦d提供更高的性能。高帶寬應用包括高性能計算(能以極快的速度執行復雜的分析)、用于監控和任務規劃的高性能視頻流、媒體和娛樂領域中的視頻剪輯和播放。
內容(Content)是指無限的安全數據存儲。此類解決方案著重于滿足可擴展的安全數據存儲需求。內容解決方案必須支持存儲的無限擴展能力,以便企業可以根據需要存儲任意多的數據,并能在需要時找到所需的數據。
NetApp致力于通過一系列解決方案來提供高性能的運算和大數據的應用。2013年11月,NetApp再次更新了E系列家族產品,推出E2700和E5500。該系列產品采用可輕松擴展的設計,適用于要求99.999%的可靠性且穩定、高性能的工作負載。
用戶在采購大數據存儲產品時,需要注意以下五個方面的問題:大數據存儲必須具有向上擴展與向外擴展的能力;架構必須是針對工作負載進行優化的,具有實時處理能力;具有整合的數據保護功能;保證7×24小時運行不中斷,可在線進行容量擴展,實施數據遷移等;可以實現服務的自動化。
方案點評
NetApp的技術優勢集中體現在其統一存儲平臺上,從入門級產品到企業級產品,全部基于同一個體系架構和操作系統,不僅部署和使用方便,而且升級和擴展非常簡單。當初,NetApp收購LSI Engenio,其中一個重要的原因就是為了大數據。2013年,NetApp不斷更新E系列產品線,推出E2700和E5500等。E5500可以支持高IOPS混合工作負載和數據庫、高性能文件系統和帶寬密集型流等應用,可確保數據的高可用性、完整性和安全性。
曙光XData:高度集成 貼近行業
關于大數據存儲,目前業界沒有一個通用的定義。曙光信息產業股份有限公司總裁助理兼存儲產品線產品總監惠潤海從曙光大數據平臺和解決方案角度,概括出大數據存儲的主要特征。
首先,大數據存儲必須支持全類型數據, 包括結構化、半結構化和非結構數據,實現統一數據支持。
其次,存儲性能上,一方面,大數據存儲要支持海量數據,并且要在保證數據可靠性的基礎之上,實現容量與性能的線性擴展;另一方面,為了實現大數據的價值,批處理和實時處理兩種措施都需要高性能的數據訪問獲取能力。
最后,在系統達到一定規模之后,系統的易用性和可管理性也是不可或缺的。
從應用角度來說,目前中國用戶在大數據存儲應用中最迫切的需求,是如何真正實現用戶數據的價值,如何驅動業務發展,實現決策和運營?!皬南到y構建層面說,要實現數據高性價比的存儲和管理,同時滿足數據服務的相關需求?!被轁櫤1硎尽?/p>
針對用戶對大數據存儲的需求, 曙光推出了像大數據一體機這樣的全類型數據分析型產品,同時還基于該產品構建了基于行業的解決方案,以幫助用戶實現大數據落地。
“除此之外, 我們還提供了大數據統一數據中心解決方案, 涵蓋了像主攻事物處理的DS900、DS800,以及針對文件存儲的Parastor等存儲產品。我們基于這些存儲產品構建了大數據運營管理平臺。”惠潤海介紹說,“曙光的優勢不僅在于可以提供全面的產品支撐,更重要的是能夠提供數據生命周期過程服務支持。目前,我們提供的免費維保期限為5年?!?/p>
曙光開發了針對不同行業和應用場景的大數據存儲解決方案。以金融行業為例,目前國內四大行的應用系統每年產生的非結構化數據量已達到PB級,結構化數據也以百TB計。面對如此大量的數據,如何存儲、管理、利用和盤活它們呢?惠潤海認為,只有通過商業智能和高級分析應用解決方案才能將數據的價值最大程度地發揮出來。
針對金融行業用戶的需求,曙光開發的XData大數據解決方案利用優化的大數據處理技術,對文件管理、歷史數據查詢和數據分析類應用等進行深入研究,為數據爆炸式增長帶來的海量數據存儲及分析應用提供高可靠的解決方案。
曙光金融行業XData大數據解決方案采用曙光自主研發的SN-MPP并行數據庫,同時結合大數據處理事實標準Hadoop,并充分考慮了多方面的數據收集,加入ETL工具和連接驅動器,提供了類SQL的接口,還和現有金融業務系統進行對接。
有些人往往也把雙機熱備份、磁盤陣列備份以及磁盤鏡象備份等硬件備份的內容和數據存儲備份相提并論。事實上,所有的硬件備份都不能代替數據存儲備份,硬件備份只是拿一個系統、一個設備等作犧牲來換取另一臺系統或設備在短暫時間內的安全。若發生人為的錯誤、自然災害、電源故障、病毒侵襲等,引起的后果就不堪設想,如造成所有系統癱瘓,所有設備無法運行,由此引起的數據丟失也就無法恢復了。事實證明,只有數據存儲備份才能為人們提供萬無一失的數據安全保護。
隨著網絡應用規模的擴張和計算機應用的深入、企業數據存儲量呈爆炸性增長,企業用戶的存儲系統日益龐雜,存儲管理的成本也在大幅上升。數據備份、災難恢復和存儲資源管理等存儲理念正在得到用戶的接受,網絡存儲也逐漸得到更廣泛的應用。目前市場上的存儲產品主要有磁盤陣列、磁帶機與磁帶庫、光盤庫等,其中磁帶設備以其技術成熟、價格低廉、產品線齊全、使用方便等優點占據了存儲市場的重要地位。
企業數據存儲的三種方式
在企業剛剛建立初期,用戶的數據規模并不大,存儲需求也很簡單,只是要把相關數據存放在某一地方即可。而存放數據的最終目的不僅是為了能夠安全保存,還必須保證數據可以隨時被調用。我們最早都是采用一種稱之為“DAS(Direct Attached Storage,直接外掛存儲)”存儲方式的一種方案。這種存儲方案的服務器結構如同PC機架構,外部數據存儲設備(如磁盤陣列、光盤機、磁帶機等)都直接掛接在服務器內部總線上,數據存儲設備是整個服務器結構的一部分,同樣服務器也擔負著整個網絡的數據存儲職責。DAS這種直連方式,能夠解決單臺服務器的存儲空間擴展、高性能傳輸需求,并且單臺外置存儲系統的容量,已經從不到1TB,發展到了2TB,隨著大容量硬盤的推出,單臺外置存儲系統容量還會上升。此外,DAS還可以構成基于磁盤陣列的雙機高可用系統,滿足數據存儲對高可用的要求。從趨勢上看,DAS仍然會作為一種存儲模式,繼續得到應用。
NAS(Network Attached Storage,網絡附加存儲)方式則全面改進了以前低效的DAS存儲方式,它是采用獨立于PC服務器,單獨為網絡數據存儲而開發的一種文件服務器。NAS服務器中集中連接了所有的網絡數據存儲設備(如各種磁盤陣列、磁帶、光盤機等),存儲容量可以較好地擴展,同時由于這種網絡存儲方式是NAS服務器獨立承擔的,所以,對原來的網絡服務器性能基本上沒什么影響,以確保整個網絡性能不受影響。它提供了一個簡單、高性價比、高可用性、高擴展性和低總擁有成本(TCO)的網絡存儲解決方案。
SAN(Storage Area Network,存儲域網絡)與NAS則是完全不同,它不是把所有的存儲設備集中安裝在一個專門的NAS服務器中,而是將這些存儲設備單獨通過光纖交換機連接起來,形成一個光纖通道的網絡,然后這個網絡再與企業現有局域網進行連接,在這種方案中,起著核心作用的當然就是光纖交換機了,它的支撐技術就是Fibre Channel(FC,光纖通道)協議,這是ANSI為網絡和通道I/O接口建立的一個標準集成,支持HIPPI、IPI、SCSI、IP、ATM等多種高級協議。在SAN中,數據以集中的方式進行存儲,加強了數據的可管理性,同時適應于多操作系統下的數據共享同一存儲池,降低了總擁有成本。
選擇合理數據存儲方案
企業存儲應用的體系結構主要有DAS、NAS和SAN三種模式,三種模式從體系架構的邏輯上看,有明顯的區別。一個企業存儲具有以下幾方面的要求: 性能、安全性、擴展性、易用性、整體擁有成本、服務等等。由于企業用戶的存儲系統構建并不是一蹴而就的事情,會經歷從單機邁向網絡化存儲的過程,因此就存在DAS、NAS和SAN三種存儲方案供企業用戶進行不同的選擇。
1. 選擇DAS方案
DAS直連式存儲依賴服務器主機操作系統進行數據的I/O讀寫和存儲維護管理,數據備份和恢復要求占用服務器主機資源(包括CPU、系統I/O等),數據流需要回流主機再到服務器連接著的磁帶機(庫),數據備份通常占用服務器主機資源20%~30%,因此許多企業用戶的日常數據備份常常在深夜或業務系統不繁忙時進行,以免影響正常業務系統的運行。直連式存儲的數據量越大,備份和恢復的時間就越長,對服務器硬件的依賴性和影響就越大。這種方案主要在早期的計算機和服務器上使用,由于當時對數據存儲的需求并不大,單個服務器需要的存儲能力就可以滿足日常數據存儲需求,因此在低檔網絡應用中相當普遍。
2. 選擇NAS方案
NAS作為一個網絡附加存儲設備,NAS設備內置優化的獨立存儲操作系統,可以有效、緊密地釋放系統總線資源,全力支持I/O存儲,同時NAS設備一般集成本地的備份軟件,可以不經過服務器將NAS設備中的重要數據進行本地備份,而且NAS設備提供硬盤RAID、冗余的電源和風扇以及冗余的控制器,可以滿足保證NAS的穩定應用。
NAS設備主要用來實現在不同操作系統平臺下的文件共享應用,與傳統的服務器或DAS存儲設備相比,NAS設備的安裝、調試、使用和管理非常簡單,采用NAS可以節省一定的設備管理與維護費用。NAS設備提供 RJ- 45 接口和單獨的IP地址,可以將其直接掛接在主干網的交換機或其他局域網的Hub上,通過簡單的設置(如設置機器的IP地址等)就可以在網絡即插即用地使用NAS設備,而且進行網絡數據在線擴容時也無需停頓,從而保證數據流暢存儲。
NAS數據存儲方案是基于局域網而設計的,按照傳統的TCP/IP協議進行通信,面向消息傳遞,以文件的I/O方式進行數據傳輸。在LAN環境下,NAS已經完全可以實現異構平臺之間的數據級共享,比如Windows NT、Linux、Unix等平臺的共享?;谶@種種原因,NAS存儲方案對于企業來說的使用和維護成本就相當低,完全可以由現有網管員擔當。
3. 選擇SAN方案
由于SAN是通過一個單獨的通常是基于光纖通道的SAN網絡把存儲設備以及服務器相連,如此當有海量數據的存取需求時,數據完全可以通過SAN網絡在相關服務器和后臺的存儲設備之間高速傳輸,對于LAN的帶寬占用幾乎為零,而且服務器可以訪問SAN上的任何一個存儲設備,提高了數據的可用性。在對性能和可靠性要求較高的場合,采用先進的SAN數據存儲網絡,可以使數據的存儲、備份等活動獨立在原先的局域網之外,從而將減輕LAN的負載,保證原有網絡應用的順暢進行; 同時SAN網采用光纖傳輸通道,可以得到高速的數據傳輸率。
SAN方案簡化了管理和集中控制,這對于全部存儲設備都集中在信息中心,是非常有現實意義的。SAN將企業的存儲和服務器平臺分開,可以實現24 x 7不間斷的系統可用性和集中管理,在這個平臺的基礎上,還可以應用一套統一的災難恢復解決方案,同時可經濟高效地擴展存儲環境。因此SAN非常適用于非線性編輯、服務器集群、遠程災難恢復、因特網數據服務等多個領域。
某電力農電公司(以下簡稱總部)于2001年正式成立,在18個轄區設有供電營業所(簡稱營業所),負責供用電管理。農網改造以后,對供電所的業務管理水平和服務質量提出了更高的要求,2009年,總部對各營業所實施了一期工程,營銷業務實現了計算機化,營銷工作發生了巨大變化。但是,由于營業所沒有與總部聯網,總部對營銷數據的處理(如報表合并匯總)仍停留在手工處理階段,營業所仍需驅車往總部送各種報表,其總體工作效率并不高。隨著覆蓋各營業所通信網絡的建成,給總部與營業所聯網運行(以下簡稱聯網運行)創造了條件。所以,2012年總部提出聯網運行的要求,一是總部與營業所實現聯網運行,實現總部與各營業所的互聯互通,實現整個農電公司的信息共享;二是實現總部對營業所進行匯總統計、匯總分析、綜合查詢等功能及對營業所營銷業務的集中監管。
1 面臨的主要問題
用電所分布在離總部方圓200公里范圍,對聯網運行影響最大的是數據存儲方式,即數據是采用集中存儲在總部還是分散保存在營業所,將直接關系到聯網運行的效果和可行性。解決數據存儲問題必須考慮以下因素:
① 保證營銷系統的正常運行。
② 數據存儲方式應有利于總部匯總統計、分析及集中管理。
③ 農電網絡覆蓋面廣、傳輸距離遠、中間結點多;加之農電網絡屬于企業內部非營利性網絡,主要用于電力企業內部的通信和變電所監測,在網絡故障診斷、故障排除等網絡維護方面的能力有限。所以,數據存儲方式必須結合網絡的實際情況,既要保證原有營業所營銷系統的穩定運行,又能滿足總部對數據集中管理的需求。
2 解決方案
針對聯網運行的需求及所面臨的主要問題,提出了三種解決方案:
方案一:在總部設置集中數據存儲系統,集中存放營業所的數據,營業所不設置數據庫服務器,通過網絡連接總部的數據庫獲取數據,完成相應操作。
優點:
(1)客戶端維護簡單,維護成本低。由于數據統一集中存放在總部,各營業所不涉及數據庫維護工作,因此,營業所一端維護相對簡單。
(2)有利于集中管理??偛靠梢詫Ω鳡I業所的數據進行實時監控管理。
(3)數據一致性好。數據集中存儲在總部,各營業所需要訪問總部唯一的數據庫,不存在數據同步問題,數據一致性好。
(4)有利于數據共享和數據挖掘。數據集中存儲有利于與其它系統的共享數據資源,有利于后期進行數據挖掘工作。
缺點:
(1)系統存在安全瓶頸。由于數據集中存儲在總部,數據網絡成為整個系統的安全瓶頸,一旦網絡出現故障,各營業所的計算機業務將陷入癱瘓。
(2)獨立運行處理能力差。系統運行必須建立在網絡聯通的情況下,如果總部主機出現故障,所有遠程子站點將無法進行工作,這在很大程度上制約了營業所工作的主動性,營業所的運行依賴于總部的正常運行。
方案二:完全分布式數據存儲。數據存儲在各營業所,總部通過網絡調用營業所數據,進行合并匯總、分析及查詢等操作并將統計結果保存在本地。
優點:
前期投入少、見效快。由于總部不保存營業所數據,只存放匯總統計結果,因此只需投入普通的數據庫設備,而且工程實施相對簡單,實施周期較短。
缺點:
(1)總部應用系統結構復雜。由于數據分布在各營業所,總部需要連接各營業所的數據庫進行匯總統計,應用系統結構比較復雜。
(2)維護成本高。數據庫集中在營業所,對數據庫的維護也集中在營業所,而營業所缺乏專門的系統維護人員,需要配備專門的維護人員進行定期維護,維護成本比較高。
(3)總部的運行依賴于營業所,營業所一旦出現數據庫故障,總部將不能進行匯總統計工作,影響總部對信息的及時掌握與決策,不利于總部對營業所的集中管理。
(4)數據分布在各營業所,不利于營銷系統與其它系統進行數據共享,不利于后期進行數據挖掘工作。
針對以上兩種存儲方案的不足,本文提出集中分布存儲方案。該方案采用數據增量復制技術,實現數據的分布存儲與集中管理。
方案三:集中分布式數據存儲。數據首先存入營業所數據庫,然后采用遠程數據增量復制技術,實現營業所數據與總部數據的同步。增量復制只對發生變化的數據進行傳送,從而降低傳送數據量,提高效率??偛啃枰黾訑祿鎯ο到y,用來同步保存營業所的數據及匯總、統計結果數據。
優點:
(1)系統安全性高。各營業所計算機業務在本地進行,不依賴公司總部,即使網絡出現故障,仍可保證各營業所計算機業務的正常運作。
(2)可靠性高。實現數據雙備份,具有冗災功能。采用“增量復制同步”技術,相當于營業所的數據在總部有一個備份,一旦營業所的網絡或服務器發生故障,可以連上總部的數據庫進行操作,系統可靠性明顯提高。
(3)總部有集中數據存儲,有利于與其它系統進行數據共享,有利于后期進行數據挖掘工作。
缺點:
(1)容易發生數據一致性問題。集中分布式存儲的一個關鍵問題是解決集中存儲與分布存儲數據的同步問題,如果處理不當,容易產生數據不一致的問題。
(2)營業所端維護量大。營業所需要維護人員對數據服務器進行定期維護,維護量大。
綜上所述,集中分布式據存儲模式優勢比較明顯,如:數據既集中又分布,應用非常靈活方便;不需與總部連接即可獨立操作(數據存在本地);系統運行速度快;只對變化的數據進行遠程傳送復制,傳輸效率高。以目前農電公司的狀況來看,集中分布式存儲加遠程數據增量復制技術是最佳的解決方案。
3 總結
集中存儲有利于信息資源的共享和數據挖掘,有利于消除信息孤島。但是,集中存儲要求網絡環境必須是穩定和安全的。對于那些實時性有很高要求且網絡安全有保障的系統,可以采取集中存儲。然而,如果系統的規模大,跨越的區域較大時,則對網絡的要求很高,會相應增加運營成本和維護管理費用。為此,對于集中分布式存儲是一種可行的解決方案,對于那些既要滿足遠程分部的獨立運行,又需要總部對分部進行集中管理的企業具有一定的借鑒意義。
參考文獻
[1]邵佩英.分布式數據庫系統及其應用(第2版)[M].科學出版社,2005.
[2]郭平,數據庫原理(第2版)[M].清華大學出版社,2005.
[3]趙文輝,網絡存儲技術[M].北京清華大學出版社,2005.
[4]王達等,計算機網絡遠程控制[M].北京清華大學出版社,2004.
作者簡介
2013年8月,IBM在國內正式FlashSystem全新閃存解決方案的同時,也首次提出了“數據經濟”的概念。在步入大數據時代后,企業用戶面對爆炸性增長的數據量,在數據的采集、處理、存儲、分析等方面承受著巨大的壓力。IBM數據經濟理念的提出,讓企業用戶重新審視現有的數據存儲、處置和管理狀況,從經濟化的角度去考慮如何提升存儲的性能、效率,同時降低成本,并充分彰顯數據的價值。
剛剛上任不久的IBM系統與科技部存儲產品部大中華區總經理黃永志在回答本報記者提問時表示:“我們之所以提出數據經濟的理念,主要目的是提醒行業用戶應該對當前的數據問題進行梳理,找出數據和存儲對業務的影響,使之量化,并按影響程度進行排序。在此基礎上,準確定位目前面臨的存儲問題,進而制定解決問題的近期、中期和遠期目標?!爆F在,IBM可以通過一套系統的咨詢方案,幫助行業用戶分析并找到數據存儲中的問題。不僅如此,IBM還能通過其完整且具有針對性的存儲解決方案,幫助用戶徹底解決數據存儲中的各類問題,并承諾可以在多大程度上讓用戶的存儲系統得到改善。比如,通常情況下,IBM FlashSystem可以將用戶的存儲系統利用率提高50%,將所需服務器的數量減少17%。
三大業務場景因“地”制宜
11月8日,IBM在北京召開了主題為“創存儲之先,領數據經濟”的IBM智慧存儲“數據經濟”會,針對數據密集型業務、需要快速上線的社交和移動等業務,以及企業關鍵應用三種業務場景,細致地闡述了如何實現數據的經濟化,從而推動業務的變革。
在數據密集型業務中,企業需要快速處理海量數據,為業務決策提供支撐,并獲取更多商機。只有高效的存儲系統才能滿足這種業務需求,比如IBM FlashSystem能夠顯著提升OLTP和OLAP的效率,加快數據處理速度,并支持大量并發用戶,而IBM SmartCloud Storage Access則支持軟件定義存儲,提供自助配置服務和用于ISV應用集成的云存儲API,幫助客戶更靈活地構建云存儲解決方案。IBM高端存儲XIV具有極高的性能和自動化功能,并針對云部署優化,還可支持OpenStack等開放標準工具。
0 前言
地理空間框架是“數字湖南”的核心、重要基礎與支撐。而地理空間框架由地理信息數據組成;因此,解決了地理信息數據的存儲問題,也就解決了“數字湖南”數據的存儲問題。地理信息數據的主要特點是:數據量龐大且增長迅速;數據格式繁多且不易轉換;數據安全性要求高。為滿足以上要求,地理信息數據的存儲必須做到:足夠的數據存儲容量;較高的數據傳輸效率;兼容異構平臺;可充分利用局域網內各種存儲設備,減少數據多重拷貝;簡化數據備份與管理,提高數據備份、恢復效率;最重要的是高可靠的數據安全特性。
為了更好地管理快速增長的地理信息數據,需要對“數字湖南”數據中心的網絡存儲系統進行統籌規劃;考慮未來技術發展趨勢和快速增加的數據量,應以滿足“十二五”期間的數據存儲管理需求為目標,進行數據中心網絡存儲方案設計。本文在研究當前存儲主要技術、發展趨勢以及地理信息數據存儲現狀的基礎上,制定了“數字湖南”數據中心的內網數據網絡存儲方案。
1 當前主流存儲技術
目前,應用較多的網絡化存儲系統主要是表1所列的三種:
從表1可以看出,只有SAN較適用于地理信息數據的存儲。
虛擬化存儲和云存儲是未來存儲技術的發展方向。存儲虛擬化是為存儲用戶提供統一的虛擬存儲池;即將品牌、級別不同且分散的存儲產品統一到一個(或幾個)大的存儲池下,用戶看見的不再是孤立的、分散的系統,而是一個統一的整體;它方便用戶更好地使用存儲資源,提高存儲資源利用效率。虛擬化存儲是提高網絡存儲系統可管理性的核心技術之一,也是目前研究的熱點。目前主要有以下三種虛擬化存儲技術:
由表2可見由于基于主機和基于存儲的方法對初建者吸引力最大;但兼容性差?;诼酚善骰蚪粨Q機的方法更為適合于互操縱性要求高的企業;前者具有更高可擴充性。
目前,云存儲由于安全性遠遠達不到地理信息數據的保密要求,故不予考慮。
2 數據中心數據存儲方案設計
現以某地理信息中心為例設計數據存儲方案。
2.1 數據中心數據存儲需求
該中心2001年建成了采用DAS方式連接的數據存儲系統,數據容量為1.5TB。雖然數據存儲系統經過幾次升級擴容,存儲容量擴大到10TB以上,但仍為DAS連接;無法滿足中心的數據存儲備份需求。主要存在以下問題:存儲總容量太??;數據的安全性、一致性和完整性面臨多方威脅;存儲資源浪費現象嚴重;網速太慢。
因此,數據中心數據存儲系統建成后,應具備如下性能:數據容量60TB;采用易管理、省投資、可擴展的集中化存儲架構;較高的存儲備份速度;較好的可管理性;高可靠性;完善的災難恢復計劃;連續地提供數據查詢、檢索和分析、計算的功能。
2.2 存儲技術選型
通過第2節的分析已確定了SAN技術比較適合地理信息中心的數據存儲備份,下表對IP-SAN與FC-SAN兩種技術進行了一般性比較。
從表3中可以看出FC-SAN目前比較適合地理信息數據存儲。
從第2節中已知基于交換機的虛擬化技術與其他虛擬化技術相比具有較高的安全性、易使用、設備便宜,較好的互操作性,較易實現故障接替等優點,故采用FC-SAN+基于交換機的虛擬化存儲構成池化存儲是該地理信息中心的最佳數據存儲方案。
2.3 數據存儲架構
數據存儲結構拓撲圖如下:
3 方案評價
該方案的特點是:
1.采用基于交換機的虛擬化存儲;采用了性價比較高的硬件設備,故成本較低。
2.存儲網絡采用了FC-SAN,傳輸速率較高。
3.采用了虛擬化存儲技術,整個存儲系統整合為一個存儲池,設備利用率高。4.采用了合理的RAID技術,提高了磁盤容錯能力。
4 不足之處是沒有備份和容災。
綜上所述,該方案提供了一個可行的高性能、任務關鍵性數據存儲中心環境。
“私有云”是針對處于防火墻內的有限人群提供托管服務專有計算網絡架構,其優點是:構筑在防火墻后,數據安全性較高、服務質量穩定,不影響現有IT管理的流程,大大降低了成本。 隨著云存儲技術的不斷發展,未來“數字湖南”數據中心數據架構存儲可以考慮采用“私有云”方式。
參考文獻:
摘要:隨著云計算和大數據技術的發展,傳統的單一存儲介質的數據存儲方式已經不能滿足大數據處理的需求,在這樣的背景下,分布
>> 分布式存儲系統中一致性哈希算法的研究 基于有向通信拓撲的高階分布式一致性算法 基于一致性的分布式粒子濾波算法 分布式業務流程實時一致性分析方法 分布式數據不一致性檢測的實現與優化 一種基于影像塊組織的遙感數據分布式存儲方法 基于資源分類信息樹的教育資源元數據分布式存儲 云存儲中基于PAXOS算法的數據一致性研究 一種基于信息分散算法的分布式數據存儲方案 混合分布在非一致性水文頻率分析中的應用 分布式環境中數據存儲技術的研究 大數據分布式存儲的冗余研究 一種協同工作環境中(分布式)的容錯和安全數據存儲方法 基于分布式的海量數據存儲解決方案 運維系統告警數據的分布式存儲方法 基于Ceph的企業分布式存儲方案 一種基于vSAN的分布式存儲系統構建和應用 基于云技術的分布式實時是數據庫高性能數據存儲檢索機制探析 基于云技術的分布式實時數據庫高性能數據存儲檢索機制探討 基于一致性哈希算法的云存儲服務器容錯性研究 常見問題解答 當前所在位置:l】
[12]CHIANG M, ZHANG S, HANDE P. Distributed rate allocation for inelastic flows: Optimization frameworks, optimality conditions, and optimal algorithms [C]// INFOCOM 2005: Proceedings of the 24th Annual Joint Conference of the IEEE Computer and Communications Societies. Washington, DC: IEEE Computer and Communications Societies, 2005, 4: 2679-2690.
近年來,鎮江供電公司企業信息化不斷深入發展,部署了大量的計算機設備、業務應用系統,網絡資源已經幾乎布署到了每一個專職崗位。隨著這些應用的不斷完善,大量的業務數據和個人文檔需要備份,這樣,數據存儲的矛盾就日漸突出。在很多情況下,計算機存儲的數據丟失可能演變成一場滅項之災。因此信息存儲系統的可靠性和可用性,數據備份和災難恢復能力是計算機網絡用戶首先關心的問題。網絡數據存儲技術的主要目標就是要實現數據存儲的安全性、高效性、可靠性、可管理性以及快速恢復能力和強大的網絡特性。存儲備份技術不僅僅指數據的簡單備份,而且還包括內容及備份的管理等多方面。
1、網絡存儲技術
網絡存儲技術是基于數據存儲的一種通用網絡術語。網絡存儲結構大致分為三種:直連式存儲(DAS):這是一種直接與主機系統相連接的存儲設備,如作為服務器的計算機內部硬件驅動。到目前為止,DAS仍是計算機系統中最常用的數據存儲方法。存儲網絡(SAN):SAN是指存儲設備相互連接且與一臺服務器或一個服務器群相連的網絡。其中的服務器用作SAN的接入點。在有些配置中,SAN也與網絡相連。SAN中將特殊交換機當作連接設備。它們看起來很像常規的以太網絡交換機,是SAN中的連通點。SAN使得在各自網絡上實現相互通信成為可能,同時并帶來了很多有利條件。網絡存儲設備(NAS):NAS是一種采用直接與網絡介質相連的特殊設備實現數據存儲的機制。由于這些設備都分配有IP地址,所以客戶機通過充當數據網關的服務器可以對其進行存取訪問,甚至在某些情況下,不需要任何中間介質客戶機也可以直接訪問這些設備。
2、Wallstor網騰WIP6系列IP SAN存儲系統
Wallstor WIP6系列網絡存儲采用一體化NAS/IPSAN/FCSAN設計,支持多功能模塊,便于用戶按照自己的環境要求選用合適的功能,該存儲性能突出,易于管理,安裝簡便,能夠真正做到即插即用。Wallstor存儲系統基于成熟穩定的嵌入式Linux系統,高性能的四核心xeon架構平臺,純64位設計體系,通過對Linux內核及rootfs的精簡和對RAID算法、存儲協議棧、網絡協議棧、文件系統的大量優化,可以滿足普通中小企業的數據存儲需求。
3、鎮江供電公司信息化建設在數據存儲和數據安全方面的需求
大容量存儲:信息集中化的發展必然帶來大量數據的集中,因此,存儲容量的需求是非常巨大的。尤其是高效、可靠、可管理的存儲硬件和軟件,能夠滿足服務器數據集中、個人文檔數據集中的存儲。
數據備份系統:業務應用數據作為鎮江供電公司信息系統的核心,對數據進行集中地備份管理、顯得尤為重要。因此,需要一個全方位、多層次的備份系統。
4、實施解決方案
為解決鎮江供電公司信息化發展過程中大量的業務數據和個人文檔的數據備份矛盾,我們在設計存儲系統時,充分考慮了系統基本功能的實現和它們的伸縮性、擴展性和集成性方面的需求,進行了系統的設計,具體拓撲圖如下:
存儲方案設計:經過對多個存儲設備方案的分析、比對,我們最終決定存儲設備選用Wallstor網騰WIP6系列IP SAN存儲系統,客戶端使用FTP、CIFS、ISCSI target盤等各種網絡協議,通過高速傳輸端口進行各類數據的上傳、下載。對于重要數據,可以進行權限管理以及分級權限管理來保護,增加其數據的安全性。Wallstor網騰存儲系統具有以下特性:
存儲系統能夠支持多種RAID算法,保證系統數據的安全可靠;支持CIFS,NFS,AFP,iSCSI,WebDAV等各種網絡存儲協議;針對文件系統、塊設備、RAID算法以及網絡協議棧做了多種優化,可達到超高的存儲性能,在大規模監控應用領域可以滿足幾百路碼流同時寫入;無需復雜且耗時的安裝過程,將硬件安裝完成后,直接開機即可運行,通過瀏覽器進行配置和管理;內置專業備份軟件,支持Windows,Linux文件備份,操作系統備份,各種數據庫備份,可以為您提供整套的存儲備份解決方案;內置文件系統檢測和恢復工具,可以在文件系統損壞的情況下對文件系統進行最大程度的恢復。
備份方案設計:我們在備份方案的設計上為用戶提供了完全備份、差異備份和增量備份三種備份方案。完全備份:備份全部選中的文件夾,并不依賴文件的存檔屬性來確定備份哪些文件。在備份過程中,任何現有的標記都被清除,每個文件都被標記為已備份。換言之,清除存檔屬性。差異備份:備份自上一次完全備份之后有變化的數據。差異備份過程中,只備份有標記的那些選中的文件和文件夾。它不清除標記,也即備份后不標記為已備份文件。換言之,不清除存檔屬性。增量備份:備份自上一次備份(包含完全備份、差異備份、增量備份)之后有變化的數據。增量備份過程中,只備份有標記的選中的文件和文件夾,它清除標記,既:備份后標記文件,換言之,清除存檔屬性。
5、總結
信息時代的核心無疑是信息技術,而信息技術的核心則在于信息的處理與存儲。由于越來越多的信息變成了電子信息,特別是計算機網絡應用的迅速增長更大大增加了對信息存儲產品的需求量和對信息備份技術的安全性、可靠性的要求。因此,在鎮江供電公司信息化建設的進程中如何實現有效的存儲、交流、管理和備份數據無疑是決定公司信息化成敗的關鍵。在網絡存儲備份技術日新月異的今天雖然新概念,新技術層出不窮,但是只有結合鎮江供電公司自身的特點,找到最適合公司發展需求的技術途徑才是根本。既不可以盲目跟風新技術,也不可以對數據增長帶來的需求視而不見。
參考文獻
[1]吳海濤.網絡電氣自動化發展[J].中國高新技術企業,2012,14:42-43.
[2]張麗萍.基于XML的多數據庫系統集成數據模型[J].低壓電器,2013,24(7):23-25.
隨著社會的發展,科技水平的提高,網絡技術應用于各個領域,同時網絡結構也趨于復雜,從而影響著網絡數據的安全與共享。網絡數據存儲備份系統要不斷完善與發展,才能適應社會發展的需求。本文將通過對DAS、NAS與SAN技術的分析與研究,提出網絡數據存儲備份系統的解決方案。
一、DAS、NAS、SAN技術的概況
(一)DAS、NAS、SAN技術的涵義
DAS即直接附加存儲或磁盤陣列,DAS將直接連接在服務器或客戶端的數據存儲設備上,它的中心為服務器,通過服務器或客戶端實現存儲,主要是由硬件組成的。NAS即網絡附加存儲,NAS具有特殊性與獨立性等優勢,它是一種專用的數據存儲服務器,它具備獨立的系統軟件,從而保證存儲的優化,同時其具有共享功能,能夠提供跨平臺的文件。NAS的中心為數據,通過存儲設備和服務器的分離,實現了對數據的集中管理,進而利于寬帶的高效釋放。SAN即存儲局域網,SAN是一種共用的、高速的專用存儲網絡,其存儲設備主要分布在服務器的末端。SAN是一種專用的高速光纖網絡,其光纖通道是由PRID陳列連接形成的,同時SAN的架構需要專用的光纖交換機與集線器[1]。
(二)DAS、NAS、SAN技術的比較
關于DAS與NAS技術的比較主要表現在以下幾方面:在安裝方面,DAS的安裝相對復雜,一般情況下需要兩天時間;NAS的安裝相對便捷,通過獨立安裝,在十分鐘左右便可以完成。在文件共享方面,DAS不具備跨平臺文件共享的功能,因此,各個系統平臺的文件存儲需要分別進行;NAS具備跨平臺文件共享的功能,因此可以實現文件共享。在操作系統方面,DAS不具備獨立的存儲操作系統,其應用依賴于服務器或客戶端,因此,DAS極易造成網絡的癱瘓與數據的丟失;NAS具備獨立的存儲操作系統,從而能夠保證其寬帶的釋放,利于網絡的正常運行。在存儲數據結構方面,DAS的數據存儲模式相對分散,因此,不利于網絡管理人員的管理,同時也增加了維護的費用;NAS的數據存儲模式相對集中,因此,其便于網絡管理人員對數據的集中管理,其維護的成本也相對較少。關于NAS與SAN技術的比較主要體現在以下幾方面:在設計理念方面,NAS擁有專用的數據存儲設備,同時可以直接聯網,是一項獨立的系統存儲平臺;SAN需要存儲在局域網,不具備獨立的設備。在安裝方面,NAS安裝十分便捷,即插即用;SAN的安裝需要在服務器或存儲設備上添加光纖網卡。在文件共享方面,NAS具備跨平臺文件共享的功能,因此可以實現文件共享;SAN具有獨立的數據存儲池,因此,不同系統平臺的數據可以在同一存儲設備中進行存儲。在存儲距離方面,NAS可以滿足長距離、不同區域數據存儲的需求;SAN的存儲距離由光纖傳輸距離決定,因此,SAN可以進行短距離的數據存儲。
二、網絡數據存儲備份系統的解決方案
網絡數據存儲備份系統采用NAS存儲技術,其具有以下特點:網絡快,其網絡訪問為雙千兆以太網;容量大,其容量為4U高度和10顆熱插拔的硬盤;實現了文件共享,并可以跨平臺、跨主機;安全性,其具有權限安全管理功能,并能夠對系統進行全天候的監控。
(一)NAS的系統存儲
在E-mail存儲方面,其系統存儲完全能夠滿足萬人用戶的需求,NAS在E-mail存儲中其容量可以達到200GB。在光盤數據下載方面,NAS的數據傳遞可以滿足100個并發的需求。
(二)NAS的系統安裝與維護
在硬件安裝方面,NAS的系統安裝可以保持原有網絡不變,將其連接到網絡的交換機上,在連接電源便實現了安裝;在軟件安裝方面,NAS的系統安裝可以在局域網的服務器上進行安裝,在軟件運行后,NAS將被自動搜索,再打開設置窗口,便可以對NAS進行設置。同時,NAS系統中可以安裝防病毒的相關軟件,進而保證其數據的安全性[2]。
(三)本方案的優點
本方案有眾多的優點,主要優點如下:
應用了負載均衡技術,NAS根據并發量的不可控性,應用了負載均衡技術,從而數據的讀取由負載均衡軟件控制,并提升了并發訪問的速度。
NAS自身的優勢,如:安全性、便捷性與擴展性等,NAS可以即插即用,其安裝十分便捷,其管理不需要專業的人員,在應用過程中,減輕了服務器的負荷,保證了網絡的高效,其安全性與共享性能夠保證數據的安全,即便網絡存在故障。
具有較快的響應與較多的并發用戶。NAS的獨立性與優化性,主要體現在其系統存儲平臺的獨立與存儲操作系統的優化,從而NAS利用網絡數據傳輸率的提升,利于用戶響應時間的降低。在并發用戶較多的情況下,NAS的性能愈加突顯,它能夠滿足較多的并發用戶的需求。
實現了跨平臺的文件共享。NAS的跨平臺文件共享,節約了用戶的費用,可以對不同文件格式的資料進行存儲,同時也可以在不同的系統上對數據進行訪問。
同時具有便捷性與安全性。NAS在安裝與維修方面十分便捷,不僅不需要輔助的軟件,還不需要網絡服務的停止,并且在安裝時,不需要改變網絡架構,進而利于用戶投資與成本的控制。NAS可以保證數據的完整性與安全性,主要是將源數據變成了日志文件,從而利于文件系統的恢復[3]。
總結:綜上所述,網絡數據存儲備份系統的完善直接關系著系統數據的安全,文中分析了DAS、NAS、SAN存儲技術,其中NAS技術具有諸多的優勢,因此,網絡數據存儲備份系統解決方案中運用了NAS技術,形成了跨平臺的網絡數據存儲系統,這一方案具有實用性、可靠性與擴展性等,不僅控制了成本,還提高了網絡的性能。
參考文獻:
1 云計算與云儲存
1.1 云計算
云計算可以在動態變化中,模擬出計算機的計算模式。其實,其中的“云”就是一種比喻方式,簡單理解成一種抽象的概念,實際上就是計算機和互聯網之間產生的作用。借助云計算,將大量的數據存儲在計算機上,這個計算機指的不是本地計算機,而是遠程服務器。企業可以將大量的信息資源轉化成客觀應用中。簡而言之,就是計算機其實就是一個簡單的操作介質,在使用數據過程中,不需要存儲或者是計算,就可以直接將其傳輸到云端。
1.2 云存儲
在云概念的基礎上延伸出了一個新的概念那就是云存儲,云存儲與云概念十分相似,它以分布式文件系統以及網格技術作為基礎,以集群應用借助應用軟件把計算機中的各種存儲設備進行有效的集中,讓彼此能夠協同合作。它的功能就是對外提供相關的數據存儲以及業務訪問。從本質上理解,它就相當于以往存儲的模式而言,已經是被創新的系模式,并且將其存儲在一個全新的存儲設備里。但是,在使用云存儲時,需要有專門的構架服務。
2 構建在云環境下的數據存儲體系
2.1 服務器的結構
在云計算中最重要的組成部分是存儲服務結構。在使用云存儲體系之前,要構建出云存儲服務構架,借助構架技術達到存儲服務目的。一般而言,構架技術繁多。在NAS文件存儲系統內,每個相連的節點都是一個獨立的個體,文件在該系統中是以最小單位存在。如果文件比較多,就會被重新定義在另一個節點上,這樣信息的使用就會方便。在實踐過程中,人們發現NAS是一個節點,但是它可以訪問文件,可以在不同的數據塊內進行訪問,可以根據客戶需求及時解決一些問題。
2.2 服務器之間的數據傳遞
在當前存儲系統環境中,一些存儲系統可以實現數據之間的傳送協議,一些被異構出來的平臺也可以實現信息有效的傳輸,最終滿足資源共享。在計算機龐大的系統內,數據高速優化和程序優化都是需要充分考慮的問題。在已經使用的數據庫內,存儲過程是必不可缺少的。它向人們提供更加高級的服務。例如:它可以傳遞邏輯表達方式或者傳遞函數,程序人員根據這些程序就可以完成處理。如果存儲過程中,出現在本地服務器上,這個過程中就可以減少更多的執行環節,在實際操作過程中,執行命令和寬帶傳輸之間的速度也會減少。從數據庫系統數據顯示,執行一個系統命令就會出現很多種結果,這些結果不能一次性的傳輸到客戶端上。應對該問題,可以使用分頁的方式處理。
3 關于企業的存儲構建方案
3.1 商業化的云存儲系統
一些數據領域已經發現且研究出商業化的存儲產品,這些產品的出現主要是借助了云存儲相關理論研究基礎上得出的。一些很早就開展研究云存儲研究的公司,已經擁有大量的自主產權云存儲及時,而且還可以提出完整的構建方案。從某種層度上看,云存儲的出現在相關協議中,可以實現數據存儲以及數據提取的自由。用戶可以獲得需求,提升服務質量。在一些虛擬的主機之間,信息還可以實現相互傳遞,一些用戶還可以獲得專門的存儲接口。一些公司在進行方案構建時,就已經充分考慮到在數據庫分布式條件下,可以被本公司使用,還可以適用于云存儲開發中,一些開發商也可以受益。
3.2 構建企業自身的數據中心
企業在發展中,數據安全性對于企業發展有重要影響。一般而言,在數據中都包含了大量的客戶信息,這些信息一旦泄露將導致信譽問題出現。如果是選擇云存儲服務時,很多的客戶資料信息都是在數據中心,這樣數據庫的安全成了問題。因此,一些大型的企業,他們會青睞于一些私有的云存儲提供的服務。借助云數據存儲設備,可以保障企業信息安全。如表1所示。
但是需要明確的是,借助存儲設備也是需要大量的資金。因為一些私有的云存儲服務設備,它主要的建立在云系統提供的存儲設備以及冗余備份系統中,因此使用起來并不是很靈活。企業在進行選擇存儲方案時,可以選擇混合的存儲方案,這樣就可以將相關聯數據將其定位為首要存儲的數據,將其轉化到私云存儲中。借助該方式可以保障數據傳輸效益,還可以最大限度的實現存儲設備資源使用。
4 結束語
在云計算機環境下,數據的存儲空間變大、變靈活,進而不斷優化的網絡系統結構。隨著科技社會不斷發展,云計算環境存儲技術要不斷創新,要有新的突破,才能順應社會發展需求。
參考文獻
[1]孫大為,常桂然,陳東,王興偉.云計算環境中綠色服務級目標的分析、量化、建模及評價[J].計算機學報,2013(07).
[2]張堯學,周悅芝.一種云計算操作系統TransOS:基于透明計算的設計與實現[J].電子學報,2011(05).
智能化ISCSI解決方案 終極無憂
存儲技術經歷了直接連接存儲(DAS)、整合的趨勢(其整合趨勢包括用NAS文件服務器合并)、SAN存儲區域網三個過程。
光纖通道是最常用的SAN技術,FC(光纖通道)最初的發展是為解決并行SCSI磁盤陣列的邊線問題,最終,業界在SAN應用上擴展了該項技術,FC在今天還提供了極好的共享存儲的解決方案。然而, 盡管有這么多優點,實際部署的FC數目還是很少。為什么呢?
首先, 對于大多數組織來說, 部署和擴展一個FC SAN非常昂貴. 在一個光纖通道環境里, 適配器、交換機和將SAN連接到一起的光纖跳線都是非常昂貴的, 使那些大部分的主流市場力不能及。另外, FC SAN的部署和維護都是很復雜的, 需要一些特殊的IT專家,而DAS和NAS則不需要.由于FC SAN的復雜性, 需要一些昂貴的軟件來簡化和自動化一些操作, 特別是更大型的部署。
智能化的iSCSI解決方案,是基于下一代的存儲設計,來處理企業和技術方面的問題。
因特網SCSI, 或者iSCSI, 將古老的SCSI塊級協議與最廣泛使用的以太網技術聯合起來,形成了一個具有以太網的經濟性、熟悉架構的高度靈活SAN技術,既有IETF標準的采納, 又有微軟和CISCO等國際IT供應商的支持, iSCSI很快就成為了一個可選擇的成熟的SAN技術。
深圳電信提供的存儲服務解決方案,是以經營管理數據為核心,為數據中心用戶推出在線磁盤的存儲服務,在線或離線磁盤備份和恢復服務(需定制),存儲區域網SAN管理及容災備份解決方案等,這些服務為客戶提供了無憂的存儲解決方案(參見上圖)。
該方案采用基于ISCSI技術的IP SAN存儲產品 BS3000系列存儲陣列作為提供存儲服務的設備。BS3000直接通過銅纜雙絞線接入千兆以太網絡,所有需要直接訪問存儲設備的主機直接通過IP存儲區域網絡來訪問 BS3000存儲陣列。存儲區域網絡采用私網IP地址以確保安全性。IDC機房以外的服務器需直接訪問 BS3000存儲陣列,則要通過直接專線與存儲區域網絡相聯或通過VPN的方式與存儲區域網絡聯接。
數據安全問題不再是可有可無
隨著城市產業信息化的發展,企業及政府對IT系統的依賴程度越來越高,數據安全已成為人們備受關注的話題,由于缺乏足夠的技術資源來維護自身的存儲系統,自9.11災難發生后,危機意識無一不成為企業思考的問題。
大型企業如金融服務公司由于數據敏感性和自身的實力,獨立創建、運營自已的容災備份中心實現業務持續性,只不過是吹灰的功夫。但對于那些掣肘于技術、資金的中小企業,既要資金拓展市場,又要為信息建設與存儲投入大量的物力、財力,面對企業信息化問題―“愛也悠悠,恨也悠悠!”。
據我們對相關企業的走訪了解,自建數據容災中心意味著購買更多的主機、存儲設備和相應的軟件等,高昂的投資代價成為中小企業如鯁在喉的心病。隨著存儲技術的發展、虛擬化、IP存儲以及更加豐富和強大的軟件功能的應用,災備中心的建設也不拘一格,出于性價比考慮,越來越多的企業或機構已開始采取將其數據備份業務外包給專業的存儲服務商。
據深圳電信IDC中心技術部的專家介紹,當前企業的海量信息存儲手段主要為以下兩種方式:一是自建,二是租賃,極少數跨地區企業兩者兼而有之。由于企業運營現實的壓力,80%的企業都采取了后者,單獨為企業提供數據存儲服務的專業公司也就應運而生,即存儲服務提供商SSP(Storage Service Provider)。如深圳電信推出的無憂備份存儲服務,便是專業SSP的行業典范。
無憂存儲 無憂服務
【深圳電信】是國內IDC行業領先的數據存儲綜合服務提供商之一,擁有華南地區最高等級電信級標準IDC專業機房共計五個,總面積達5000余平米,裝機容量可達62000余臺以上。
IDC中心機房的負責人告訴我們:深圳電信IDC擁有華南地區最高等級的專業機房,現以正式通過ISO27001標準認證,機房內部嚴格按照國家AA級機房標準提供配套服務及設施,整體抗震級別為8級,供電系統采用不間斷電源供應及智能冗余備份UPS系統,確保穩定的系統運行。
嚴密的智能監控系統、冗余線路保證高速可靠的干線連接等雄厚的實力設施配備及安防資源為用戶提供一個堅不可摧的存儲安全環境。
專業的存儲解決方案提供商―創新科存儲技術有限公司,其存儲方案在金融、電信、銀行、證券、廣電等行業有著廣泛的應用,憑借其專業的技術研發和支持團隊,可為用戶提供一個全面的存儲、備份解決方案。
與自建存儲系統方案而言,深圳電信的無憂存儲服務主要有以下四個方面的優勢:
1)減少企業的存儲投入成本,企業自建數據容災中心從購買主機、存儲硬軟件設備到機房安全防衛系統的資源建設都要占據企業IT投入資本的40~50%,而采用直接租用深圳電信成熟的體系及管理維護,能為企業節省將近20~30%的經營成本。
中小企業購買需求增加
然而,IBM卻在此時再度發力中低端市場,正式啟動了將輻射40多個城市的2009 IBM企業信息架構全國巡展。IBM希望通過該巡展與其合作伙伴和客戶共同探討應對當前信息化挑戰的一體化信息架構解決之道。與此同時,IBM利用其在IT領域的整體優勢,為中小企業客戶定制了六個中小型信息系統解決方案,以滿足不同類型企業的新興存儲需要。
IBM此次巡展首要著力點就在中小企業市場。IBM系統與科技事業部大中華區系統存儲部總經理侯淼介紹說,2009年上半年整體市場回暖,很多市場調查報告都顯示中小企業客戶購買需求增加。IT系統中日益增多的設備和飛速增長的非結構化數據都對中小企業的信息架構提出了全新的挑戰。很多中小企業決定著手解決信息存儲方面的諸多問題,而且他們不只希望獲取單純的存儲技術,而是希望獲得融匯了業務和IT洞察力的綜合信息系統解決方案。
找準市場需求
對癥下藥
席卷全球的國際金融危機難免給各行各業帶來影響,但是這并不代表市場需求減少,IT廠商關鍵是要找準市場需求,對癥下藥。IBM針對中小企業在此階段對信息保留和信息高可用方面的典型需求,充分發揮自身在IT領域的整體技術優勢,為中小企業客戶提供了6款融合服務器、存儲、軟件等多種元素的特色解決方案,基于存儲向客戶交付獨特的系統整合價值。
中型數據保護及備份方案:采用DS4000或DS5000作為核心數據存儲,利用IBM帶庫和備份軟件實現自動的數據保護,利用一站式方案解決數據存儲建設中的在線數據和離線數據存儲問題;
小型數據快速備份及恢復方案:利用Tivoli Storage Manager(TSM) FastBack,配合 DS3000/DS4700,確保主站點與災難恢復站點之間的數據安全轉移,可對任何類型數據損失進行即時恢復,并消除了備份窗口、手工備份/還原過程及遠程辦事處對磁帶的使用,實現了靈活的擴展和統一的管理;
數據中心系統高可用解決方案:由Power和System x服務器與存儲構成,采用服務器集群加雙存儲的高可靠結構;
高性能計算環境下的高性能存儲:由x86集群、高性能I/O服務器、高性能SAN存儲陣列與帶庫、TSM備份系統、并行文件系統及x86登錄服務器構成,可確保優異的持續帶寬、集中的SAN存儲系統及統一的并行文件系統和數據管理策略;
存儲系統整合解決方案:由DS4700/DS5000配以SVC(存儲虛擬化)構成,憑借SVC的卓越性能,可實現高速的存儲訪問及強大的存儲整合能力;
存儲全系統融合方案:利用DS5000、N系列或Diligent重復數據刪除軟件及8Gb SAN交換機,成就高性能的存儲系統,滿足企業在容量、性能、穩定性和安全性要求的同時,確保未來的存儲需求,并可交付全面的數據備份和災備功能以及法規遵從能力。
此外,IBM力求從多方面幫助中小企業降低成本:首先,在初期購買價格上給予更多優惠,部分軟件支持免費;其次,通過產品創新為企業節能省耗,如DS5000系列集成了靈活的主機接口、第二代XOR引擎、8Gbps光纖控制器,并可支持多種磁盤驅動器,成為目前中端市場最為靈活的存儲系統。
360度渠道拓展