云計算時代 數據管理日趨智能化


2012-08-01 09:00:00   出處:比特網   作者:   
服務器在數據中心的地位正在下降,存儲系統--得益于數據重要性的日益加強--在數據中心的地位正在穩步上升,企業信息化與IT系統的核心發生實質的轉變:計算能力不再是評價的主要標準,對信息與數據的掌控是CIO最迫切的訴求。

  服務器在數據中心的地位正在下降,存儲系統--得益于數據重要性的日益加強--在數據中心的地位正在穩步上升,企業信息化與IT系統的核心發生實質的轉變:計算能力不再是評價的主要標準,對信息與數據的掌控是CIO最迫切的訴求。

  據Gartner的報告顯示,2010年全球基于控制器的外置(ECB)磁盤存儲收入比2008年的高位水平超出了14億美元。2010年ECB存儲收入超過194億美元,比2009年的165億美元高出了18.1%1。而同樣基于Gartner的數據,2010年第四季度全球服務器市場出貨量增長6.5%,營收增長16.4%2。自2010年開始,企業在服務器上的投資年均增幅已經開始逐漸小于在外部磁盤存儲上的投資(主要是數據中心的網絡存儲系統),存儲開始超越服務器成為IT投資主要增長點。

  正因為如此,數據管理的話題才會引發如此多的人熱議,也催生了《數據管理的智能趨勢》這個文章系列的誕生,在之前的文章中,存儲管理、虛擬化、數據保護和云計算組成了智能數據管理在當下迫切需要解決的話題,但面向未來,數據管理的趨勢是否一成不變?2、3年后的數據中心,當存儲系統與數據管理架構成為數據中心的核心價值,是否將會發生新的改變?

  答案是肯定的,在過去三十年,SAN和NAS幾乎統治了存儲市場,但這一切已經開始發生改變,對象存儲、融合設備正在興起;存儲系統的生命周期正在縮短,原本5-7年的生命周期,被數據爆炸逐步壓縮到3-5年;數據中心內連接的方式看起來也正在從光纖通道轉變為新的連接手段;即便是數據本身,看起來也在發生著改變……

  就像國家制定“十二五”計劃,為未來五年設置目標、指導意見和實現的路線圖。企業數據中心的IT規劃同樣需要為五年,甚至更長時間的發展做出規劃,而數據作為最重要的,并且是唯一將貫穿始終的部分,為其做出長期規劃的必要性不言自明。

  但在如此復雜和多變的信息與數據組成的世界中,面向未來制定長期的數據管理規劃,是企業CIO將面臨一大挑戰。智能是必然的發展方向--解放人力降低成本,加大自動化、智能化的比重--智能數據管理已經展現出其作為“面向未來的數據管理”方法的重要優勢--讓信息、數據、存儲系統和整個數據中心變得更加智能,這總是沒錯的。

  連接方式改變數據存儲:10GbE,FCoE,DCB

  2007年4Gb/s光纖通道(FC,Fiber Channel)成為數據存儲的主流之后,FC在數據中心市場就開始進入發展的平臺期,雖然FC已經在數據中心--尤其是存儲系統--的外部連接市場占據極高的市場份額,但由于價格與擁有成本、技術發展速度的桎梏,發展的速度受到了極大的局限。在10Gb/s以太網技術成熟之后,FC雖然以8Gb/s的新一代速率產品應對,但縱觀未來3~5年的發展,以及10Gb/s以太網如今極快的發展勢頭,這兩者競爭雖然仍有不少光纖通道廠商仍堅持己見,但勝負其實已經非常明顯。

  伴隨著10Gb/s以太網的發展,FCoE和DCB也應需而生。隨著10Gb以太網漸行漸近,基于以太網的光纖通信技術(FCoE)和新的無損10Gb/s以太網(Data Center Bridging,簡稱 DCB)技術開始在數據中心流行開來,未來數據中心網絡融合的基礎將構建在10Gb以太網架構上。

  數據廣泛存在于企業的IT系統中,是企業發展的核心,一切的IT系統發展都有賴于數據,并服務于面向企業業務的數據管理需求。隨著IT行業的發展以及企業對數據管理要求的不斷進步,數據管理的“智能”趨勢已經銳不可當,智能的數據管理正在成為所有企業所追求的共同發展目標。

  FCoE力爭在以太網上實現光纖通道才具有的特性,它可以將光纖通道信息插入以太網信息包內,從而讓服務器-SAN存儲設備的光纖通道請求和數據可以通過以太網連接來傳輸;DCB則提供了一個能夠最大限度地減少丟包現象的網絡基礎設施,進一步擴展了以太網,由于 DCB提供了"無損"網絡,因此它能夠最大限度地提高網絡性能的可預測性,也為存儲系統真正實現運行在以太網環境中提供了基于低成本的可能性。

  10Gb/s以太網、FCoE和DCB,三種連接方式正在改變數據存儲,同樣也在改變著數據管理的方式,隨著以太網在下一代即將邁向40Gb/s而FC的下一代則僅僅為16Gb/s,且DCB和FCoE技術大大提高了以太網的應用水平和范圍,以太網存儲系統和光纖通道存儲系統在存儲市場的比例將發生很大的改變,以太網很有可能超越光纖通道在存儲系統中占據主流。

  開始采用或逐步過渡到以太網存儲系統是面向未來的數據管理的必經之路,以EqualLogic在以太網市場上每年兩位數的增長速度能夠看出大勢所趨,而Compellent存儲系統實現FC+IP SAN并為FCoE準備就緒的統一存儲,則為未來5~7年的過渡與替換期做足準備——現在是時候為以太網時代做好準備,因為以太網全面占據光纖通道存儲系統市場份額的事情,的的確確會在未來3年發生。

  數據開始流動 系統升級加快步伐

  在分層存儲技術成熟以前,數據被靜態的存儲在一成不變的介質中,只有等到確認一份數據不再被使用,或是不再被經常使用,數據才會隨著歸檔軟件對歸檔服務器的巨大資源占用,被歸檔到更為低成本的磁盤或是磁帶上面。數據的靜止造成了存儲系統的巨大浪費。

  隨著Compellent為首的自動分層存儲技術的成熟,以及由EqualLogic、Compellent等存儲系統所帶來的橫向擴展架構——同代甚至是多代之間的存儲系統能夠形成一個統一的存儲池——數據開始在不同的介質、不同存儲節點之間流動,加之磁盤備份存儲系統開始取代磁帶成為備份的高效替代系統,數據的流動比以往任何時間更加流暢。

  如果你的數據還停留在主存儲系統上,或是停留在昂貴的在線磁盤上,高昂的成本和低效率的存儲系統會讓你迫切提高他們的效率和性價比,尤其是在虛擬化時代來臨之后,不僅數據動態變化,虛擬的服務器——虛擬機的建立、運營、停止并繼而消亡的過程來的比以往任何時候都要快。一份數據可能今天還是重要的案頭資料,明天可能就會成為需要“暫存”到低成本系統甚至是進行歸檔的對象。

  因此,自動分層存儲和橫向擴展必須成為未來存儲系統的目標,而數據管理架構,也應該能夠智能的識別出至少三個方面:1、哪些介質是高效的,哪些介質是低成本的,SAS磁盤、SATA磁盤或是SSD能否被識別出來;2、哪些數據需要被及時的備份、歸檔,哪些數據需要被精簡(重復數據刪除);3、哪些系統節點是新的性能更好的節點,而哪些又是可能被用來進行較低相應需求的應用的數據的承載。

  如果你的數據管理架構,無法實現這樣的智能數據管理,那么,不僅是你的存儲系統,你的數據中心、IT架構,都Out了!

  進入大數據時代 進入云計算時代

  大數據(Big Data)與云計算的勢頭已經難以抵擋,大數據問題的出現,主要是我們現在所面臨一個新的數據量級的來臨:企業數據從TB到PB,個人數據從GB到TB——我們對解決大數據問題的訴求來自于三點:1、生成數據的設備的增加,個人數字設備、企業計算系統產生的數據量遠遠超過10年前, CommVault的徐永興說2011年產生的數據量是1996年的180倍;2、文件(非結構化數據)本身的大小發生變化,從600MB的RMVB到了30GB的藍光1080P視頻;3、企業數據量增加,造成的數據庫龐大。

  而云計算隨著這一輪浪潮的浮華褪去,也正在顯示其作為業界發展趨勢的真實本質——不論云計算是否是一種新的計算形態——比如有些人認為其不過是分布式計算和按需付費的結合——單就我們希望云計算所達成的目標:跨地域、高可靠、按需付費、所見即所得、快速部署等等這些都是過去二十年IT行業所追尋的。現在我們可以說,云計算將是新的IT生態,當然,云計算正面臨著大數據和混合云需求的考驗。

  自然而然,云計算和大數據將是未來的數據管理的一大挑戰,對于云計算,在之前的文章中我們已經談過以太網存儲(IP SAN)、橫向擴展、自動分層、重復數據刪除以及無縫擴展的意義,但對于大數據而言,我們同樣需要解決辦法——與大多數宣傳所談的不同——我認為大數據不僅存在于大型企業,同樣存在于中小型企業中,由于大數據可能是單體文件(非結構化數據)的龐大,也可能是來自于數據倉庫等應用的結構化大數據集的龐大。
 

責任編輯:Q_Chen

相關熱詞搜索:云計算 數據管理 智能化

上一篇:云計算時代 大數據的出現是好局還是攪局?
下一篇:五大原因證明云計算不會遭受消極反應

分享到: 收藏

專題

more>>

中國軟件園區發展...

當前,我國經濟已由高速增長階段轉向高質量發展階段,..

第三屆中國大數據...

2018年12月11日下午,作為第十一屆中國信息主管年會的..
Email:

藏經樓

more>>

論壇熱議

more>>
欧洲超级杯