在大數據時代,各行各業(yè)的發(fā)展都離不開數據的存儲和流動。以電影行業(yè)為例,現代高清數字電影的制作過程中,很輕易就會產生PB級的數據,3D電影則會更多。3D動畫電影《Dispicable Me》的制作公司——法國照明娛樂公司(Illumination Mac Guff)技術總監(jiān)Bruno Mahe向《營贏》講述了他們遇到的IT挑戰(zhàn)。
《營贏》:全世界的影迷都對《Dispicable Me》里的小黃人印象深刻,作為這部電影的制作公司,法國照明娛樂公司在IT方面存在什么挑戰(zhàn)?
Bruno Mahe:制作電影,尤其是動畫電影,在IT方面其實有很大的挑戰(zhàn)。大家看到的動畫其實都是電腦制作的圖像,我們需要電腦來做渲染的工作,一部電影需要渲染幾千萬幅圖像,而我們可能要做很多次的渲染,才能把完美的畫面做出來。在這一過程中,我們需要幾百臺工作站,幾千個計算的節(jié)點,處理超過幾千TB的數據。
在存儲方面,有兩個主要的挑戰(zhàn),一個在于擴展性及性能,動畫電影制作周期中會不斷產生海量媒體文件,存儲系統(tǒng)要能夠靈活地擴展和快速處理這些文件;一個是數據分級,這么多數據不可能都放在昂貴的高性能存儲上,必須讓數據跟渲染過程匹配起來,根據需要將數據自動遷入到高性能存儲上,或者遷出到低成本存儲上。
《營贏》:華為在IT領域為你們提供了什么幫助?
Bruno Mahe:華為給我們提供了支持2K高清視頻的高性能存儲系統(tǒng),這能夠幫助我們快速渲染,回放高清3D圖像,同時華為幫助我們自動分級了幾百個TB的數據,實現24×7的運作,這樣我們可以更加聚焦電影本身的藝術處理。這些解決方案對我們制作新的電影非常有幫助。
《營贏》:你們與華為有沒有下一步的合作計劃?
Bruno Mahe:華為正在幫助我們做云存儲的部署。我們現在已經有私有云來做渲染,在華為的幫助下,我們正在搭建融合媒體云的環(huán)境,接下來幾個月,我們會聚焦完成這個項目,將來能夠支撐4K甚至更高的分辨率。
我們的下一部小黃人電影將會在2015年7月發(fā)布,有了華為的IT支持,這部電影一定會變得更好看。
探索“小黃人”的奧妙需要處理如此龐雜的數據,而探索人類基因之謎與之相比顯得更加紛繁復雜。全球最大的基因組研究中心——華大基因旗下的深圳華大基因研究院副院長方林向《營贏》表示,在基因研究過程中,對數據存儲系統(tǒng)的要求越來越高,對IT技術的挑戰(zhàn)也越來越大。
《營贏》:很多人都覺得基因研究非常神秘,請簡單介紹一下基因測序?
方林:科學研究表明,每個人的壽命最長能活到150歲,但如何活到150歲?其實這就是基因測序研究的一個命題。
在現實世界里,大部分得人都沒辦法活過100歲,在50到60歲的時候,就會因為各種疾病產生健康問題。這些疾病有的是可以完全治愈的,有的卻沒有辦法根治。
那么,有沒有一種科學的方法,能夠精確地預測、預防和干涉這些疾病的產生呢?人的健康有50%是由我們的基因決定的,還有50%是環(huán)境因素造成的。通過基因測序,我們可以大大降低遺傳相關的疾病發(fā)生率,減少出生缺陷,還可以實現對疾病預測、預防、預警以及個體化診療,從而改善人們的生活健康水平。
《營贏》:基因測序對數據存儲系統(tǒng)有什么要求?
方林:要回答這個問題,我們需要先了解一下“組學數據”。組學數據包括我們基因的數據、代謝組數據,當然也包括在醫(yī)院里做CT、X光的醫(yī)學影像數據,還有日常的環(huán)境數據。如果我們將每個人從出生到死亡的所有組學數據都記錄下來,數據量會超過10TB。華大基因正在建立第一個百萬人基因組數據庫,這些數據加起來將超過10EB(相當于2013年全球存儲廠商出貨容量的一半,或者一千萬部4K電影)。
基因組學的研究,以前是把每個人的基因組和標準的基因組進行比較,這是把100GB的數據和3GB的數據進行比較的過程。而我們現在要做的百萬組學的研究,是把每個人的組學數據和100萬人的組學數據進行比較,即把10TB的數據和10EB的數據進行比較分析,其難度可想而知。
《營贏》:在基因研究過程中,華為存儲提供了怎樣的幫助?
方林:華為在IT技術領域具有深厚的研發(fā)和實踐經驗,是華大基因最優(yōu)先選擇的合作對象。在前期的合作過程中,我們利用華為的大數據存儲,構建了融合存儲池,支撐新業(yè)務的快速部署和調配,促進了大數據的流動和共享,這大大加速了基因分析的進程。接下來,我們和華為還會進一步推進BT和IT技術的融合,服務社會,造福人類。
華為存儲究竟有什么魔力,贏得法國照明娛樂公司和華大基因等各行業(yè)翹楚的青睞?華為存儲產品線總裁范瑞琦揭示了其中奧秘。
《營贏》:華為在2014年5月份發(fā)布了面向未來云架構的OceanStor融合存儲,它有什么特點?
范瑞琦:企業(yè)數據中心傳統(tǒng)的存儲部署方式,是為不同的應用部署不同的存儲設備。例如,數據庫應用使用SAN,文件共享類采用NAS,應用加速采用全閃存存儲,存儲異構整合采用存儲虛擬化網關,加上備份等數據保護系統(tǒng),整個數據中心的存儲層形成了一個個的數據孤島,數據不能共享,管理和擴展復雜。而在云計算的趨勢下,這種方式帶來的問題更加嚴重。
OceanStor融合存儲正是打破了這種傳統(tǒng),創(chuàng)新性地將SAN、NAS、閃存、存儲虛擬化和備份融合在一個系統(tǒng)中,存儲服務按需分配,讓業(yè)務更敏捷,同時通過數據的自由流動、整合和共享,使得數據價值和商業(yè)洞察的發(fā)現更加簡單。
《營贏》:融合的理念都具體體現在哪里?
范瑞琦:華為OceanStor融合存儲能夠實現五大融合。
首先,華為OceanStor融合存儲真正實現了將SAN(面向關鍵應用和結構化數據的存儲)和NAS(面向文件共享的系統(tǒng))自然融合到一個系統(tǒng)中。
其次,大部分存儲廠商的高中低端存儲架構不同,數據不能互通。而華為的高中低端存儲都基于同一個存儲操作系統(tǒng)OceanStor OS,一套OS可以灌裝在不同的硬件系統(tǒng)中,數據可以在不同檔位的存儲設備間自由流動和共享。
同時,華為融合存儲通過OceanStor OS一套架構同時支持HDD和SSD,智能適配業(yè)務對性能和容量的需求,很好實現了性能和容量的融合。
在傳統(tǒng)的備份方式下,企業(yè)需要采購額外的備份軟件和備份服務器,而華為OceanStor已經內置了備份軟件,省去了一大筆采購開支。
那么,使用華為存儲系統(tǒng),是不是就意味著需要把原來數據中心既有的其他廠家的存儲設備都拋棄掉呢?答案是否定的。華為OceanStor OS還可以將第三方的存儲設備接管起來,統(tǒng)一管理和使用,實現異構存儲設備的融合。
OceanStor融合存儲是基于OceanStor OS打造的第一款企業(yè)融合存儲產品。它將幫助企業(yè)用戶進入數據價值發(fā)現之旅。
《營贏》:OceanStor未來的發(fā)展方向是怎樣的?
范瑞琦:在華為看來,不管是軟件定義,還是硬件重構,都是要基于業(yè)務需求,存儲產品和方案始終都要滿足企業(yè)的實際需要,也就是說,存儲更應該是業(yè)務驅動的。
華為存儲已經圍繞業(yè)務的不同應用場景,打造了相應的存儲產品:有面向企業(yè)關鍵應用的統(tǒng)一存儲系統(tǒng),通過創(chuàng)新的五大融合特性讓系統(tǒng)變得更簡單;有集海量數據存儲、歸檔、分析等能力于一體的大數據存儲系統(tǒng),系統(tǒng)強調擴展性及提供最佳大數據存取與分析效率;有冷存儲系統(tǒng)應對海量數據的長期低成本保存,致力于提供超EB級的極致容量和極低TCO能力。此外,華為計劃在2015年發(fā)布一款提供極致性能的全閃存陣列系統(tǒng)vPARS,幫助企業(yè)應對越來越多的實時存儲系統(tǒng)需求。
但最為重要的是,華為存儲產品族不是一個個數據孤島。華為認為,所有的存儲資源和能力都應該按照需求被統(tǒng)一編排,通過服務的方式讓企業(yè)隨心應用。所以,在存儲的基礎架構之上,華為OceanStor未來支持通過統(tǒng)一的SDS Controller(業(yè)務驅動存儲控制器),將所有面向不同應用場景的存儲產品以及通用服務器,整合為一個存儲資源池,智能地管理、調度以及開放不同SLA等級的資源給不同的上層應用,為企業(yè)帶來服務化、自動化、彈性的存儲資源。