國內(nèi)云計算的缺失環(huán)節(jié):GPU并行計算


作者:祁海江    時間:2014-04-24





  核心提示: 很長時間以來,云計算成了一個熱鬧詞匯。那么到底什么是云計算呢?它本質(zhì)上是一種社會智力資源的共享,通過云端的技術(shù)封包,降低了難度門檻,使得更多用戶可以采用的一種“很難很先進”的技術(shù)。

  云計算特有的優(yōu)點和巨大的商業(yè)前景,讓其成為了近年來的IT界最熱門詞匯之一。當(dāng)然,這也與中國移動互聯(lián)網(wǎng)的繁榮緊密相關(guān),它們需要有相應(yīng)的云計算服務(wù)作為支撐。但本文作者祁海江結(jié)合自身的經(jīng)驗,對國內(nèi)目前的云計算服務(wù)進行觀察后認為,國內(nèi)云服務(wù)商多數(shù)采用過于簡單粗放的“遠程機房+移動大硬盤”模式,不能滿足并行圖形處理的計算需求,“應(yīng)盡快認清技術(shù)潮流,整合前沿計算工具,以便推進云GPU并行計算服務(wù)。”那么云GPU并行計算服務(wù)有多重要?作者在文中作了深入淺出的解讀,字里行間也能一窺國內(nèi)云服務(wù)的夸大與事實上的落后現(xiàn)狀。


  很長時間以來,云計算成了一個熱鬧詞匯。那么到底什么是云計算呢?它本質(zhì)上是一種社會智力資源的共享,通過云端的技術(shù)封包,降低了難度門檻,使得更多用戶可以采用的一種“很難很先進”的技術(shù)。


  這種技術(shù)可以應(yīng)用到什么地方呢?我們看到現(xiàn)在中國的移動互聯(lián)新經(jīng)濟高度繁榮,這就需要有相應(yīng)技術(shù)高度的云計算服務(wù)作為龍骨支撐。但現(xiàn)在中國的云服務(wù)商多數(shù)采用過于簡單粗放的“遠程機房+移動大硬盤”模式,不能滿足并行圖形處理的計算需求。按照當(dāng)今計算技術(shù)的趨向看——“視頻音圖+3D+規(guī)模機器學(xué)習(xí)+大數(shù)據(jù)分析=》高強度計算任務(wù)=》云GPU并行運算”,運營商應(yīng)盡快認清技術(shù)潮流,整合前沿計算工具,以便推進云GPU并行計算服務(wù)。這是因為:


  1. 現(xiàn)行的圖形、圖像及3D計算在各種視頻游戲、電影產(chǎn)業(yè)、工業(yè)設(shè)計、醫(yī)療成像、空間探索、遠程通訊等方面有著廣泛的應(yīng)用。


  隨著計算機技術(shù)的發(fā)展,人們對圖形和圖像的處理要求也越來越高,尤其現(xiàn)在興起的3D技術(shù),使圖形圖像處理和3D計算已經(jīng)應(yīng)用到了各種視頻游戲,電影產(chǎn)業(yè),醫(yī)療成像,空間探索,遠程通信等各個方面。


  現(xiàn)在風(fēng)靡的大型3D游戲,諸如《使命召喚》《極品飛車》等,這些游戲畫面逼真,3D特效強烈,所以要求計算機對圖形圖像的處理能力要求也非常高。2010年放映的電影《阿凡達》開創(chuàng)了動畫形象代替了演員的3D電影的先河,它完美的運用了3D立體畫面的創(chuàng)造了逼真的效果使畫面美輪美奐。在工業(yè)設(shè)計上,有很多廣為人們熟知的3D處理軟件,例如AutoCAD,Maya,SolidWorks等知名軟件。在醫(yī)療成像方面,3D/4D立體成像技術(shù),使醫(yī)護人員可以獲得從傳統(tǒng)平面顯示無法捕捉到的信息數(shù)據(jù),能夠360度全方位立體讀取影像信息,為臨床診斷提供了更豐富、精準的影像資料,大幅度降低了對病灶的漏診,提高了診療質(zhì)量,必將掀起醫(yī)療影像信息處理的一次技術(shù)革命。


  伴隨著IT互聯(lián)網(wǎng)以及手持終端的發(fā)展和普及,要處理的數(shù)據(jù)量的爆發(fā)式增長,手機上也出現(xiàn)了3D游戲的發(fā)展趨勢,這些都對數(shù)據(jù)圖像和3D計算提出了更多的需求。


  由此看來,目前對圖形圖像以及3D計算的巨大需求,已經(jīng)要求計算機需要具備強大的3D建模能力,然而CPU的串行處理能力遠不能滿足高效的處理圖像以及3D計算的能力,因此并行計算技術(shù)的使用日益廣泛。


  2. 以美國NVIDIA公司圖形顯示卡的CUDA運算包為代表的GPU并行運算技術(shù),已成為工作站、服務(wù)器、個人電腦的標準組件。


  GPU是電腦圖形顯示卡上負責(zé)圖像運算工作的微處理器。著名的顯示卡公司NVIDIA為其主流顯卡產(chǎn)品設(shè)計了專門的GPU并行計算工具包,稱之為CUDA(Compute Unified Device Architecture,統(tǒng)一計算架構(gòu))。


  以GeForce 8800 GTX為例,其核心擁有128個內(nèi)處理器。利用CUDA技術(shù),就可以將那些內(nèi)處理器串通起來,成為線程處理器去解決數(shù)據(jù)密集的計算。而各個內(nèi)處理器能夠交換、同步和共享數(shù)據(jù)。利用NVIDIA的C-編譯器,通過驅(qū)動程序,就能利用這些功能。亦能成為流處理器,讓應(yīng)用程序利用進行運算。GeForce 8800 GTX顯示卡的運算能力可達到520GFlops,如果建設(shè)SLI系統(tǒng),就可以達到1TFlops.


  有軟件廠商利用CUDA技術(shù),研發(fā)了一個Adobe Premiere Pro的插件。通過插件,用戶就可以利用顯示核心去加速H.264/MPEG-4 AVC的編碼速度。速度是單純利用CPU作軟件加速的7倍左右。


  NVIDIA從所有基于G80及之后架構(gòu)的民用與專業(yè)顯卡或運算模塊皆支持CUDA技術(shù)。整體運算能力比單純利用CPU的速度提高7倍甚至更高。Tesla GPU是針對工作站和服務(wù)器的加速器,與消費級顯卡和專業(yè)圖形卡相比,具有完整的雙精度浮點運算性能,具備雙DMA引擎可滿足雙向PCIe通信,板載內(nèi)存達到12G(Tesla K40 GPU),具有專門的 Linux 補丁、InfiniBand 驅(qū)動程序以及 CUDA 驅(qū)動程序,針對 Windows 操作系統(tǒng)的 CUDA 驅(qū)動程序可實現(xiàn)更高性能,TCC 驅(qū)動程序可減少 CUDA 內(nèi)核的系統(tǒng)總開銷并支持遠程桌面 (Windows Remote Desktop) 以及 Windows 服務(wù)


  3.以CUDA為代表的GPU并行計算技術(shù),在多個領(lǐng)域已發(fā)揮重要作用


  在科研界,CUDA應(yīng)用廣泛。例如,CUDA現(xiàn)已能夠?qū)MBER進行加速。AMBER是一款分子動力學(xué)模擬程序,全世界在學(xué)術(shù)界與制藥企業(yè)中有超過60,000名研究人員使用該程序來加速新藥的探索工作。


  在金融市場,Numerix以及CompatibL針對一款全新的對手風(fēng)險應(yīng)用程序發(fā)布了CUDA支持并取得了18倍速度提升。Numerix為近400家金融機構(gòu)所廣泛使用。


  在消費級市場上,幾乎每一款重要的消費級視頻應(yīng)用程序都已經(jīng)使用CUDA加速或很快將會利用CUDA來加速,其中不乏Elemental Technologies公司、MotionDSP公司以及LoiLo公司的產(chǎn)品。


  4.NVIDIA公司非常重視GPU并行計算在云服務(wù)器上的嫁接,美國已有數(shù)家云服務(wù)商提供GPU并行的云計算服務(wù)。


  2009年10月20日,NVIDIA與Mental images聯(lián)合推出一款基于云計算的高端服務(wù)器——RealityServer.


  2012年5月17日,NVIDIA推出利用GPU加速云計算技術(shù)。


  2012年10月17日,NVIDIA推出了首款云計算虛擬GPU加速平臺——VGX K2.


  2013年GTC大會上,NVIDIA帶來了在云計算領(lǐng)域最新的產(chǎn)品服務(wù)器平臺——NVIDIA GRID.


  隨后幾年時間里,美國多家服務(wù)器廠商推出了各自的基于GPU并行計算的云服務(wù)平臺。現(xiàn)在提供GPU云計算的服務(wù)提供商主要有Amazon,Nimbix,Peer 1 Hosting.


  5.一個讓人十分費解的局面是,國內(nèi)各大云服務(wù)提供商(諸如阿里云、盛大云、萬網(wǎng)云)似乎對GPU并行計算沒有任何動作。


  自從云計算的概念提出,迅速在中國IT界形成了熱點,大大小小的云服務(wù)商如雨后春筍般出現(xiàn)。幾大云服務(wù)商以各種名目強調(diào)自身特色的云計算服務(wù)組合,如阿里云的“飛天”平臺;百度BAE云平臺;浪潮集團建立的HPC/IDC、媒體云、教育云;華為公司彈性云計算FusionCloud戰(zhàn)略;騰訊云生態(tài)系統(tǒng);華云數(shù)據(jù)公司推出的運營型PaaS平臺。


  然而在形形色色的各種名號之下,各家公司的服務(wù)內(nèi)容非常同質(zhì)化,基本都是網(wǎng)絡(luò)存儲+虛擬CPU計算時段租用的模式。對用戶真正的運算需求理解挖掘不夠,往往只是把一些淺層的PC功能簡單轉(zhuǎn)移到云端,對于復(fù)雜度高、維護難度大的運算功能未能提供虛擬層的解決方案。換句話說,凡是用戶在PC端已經(jīng)能輕松愉快做的事(比如辦公軟件),云服務(wù)商不厭其煩的去勸說用戶將其轉(zhuǎn)移到云端,而中小企業(yè)用戶感到力不從心、真正需要幫助的具有技術(shù)難度的運算功能,云服務(wù)商就一問三不知了。


  近期,筆者單位由于為客戶開發(fā)的應(yīng)用涉及高強度的數(shù)據(jù)處理,需要并行運算。我們與多個云服務(wù)商接洽,均未見有提供GPU并行運算服務(wù)。這是一個讓人難以理解的局面,電話聯(lián)系云服務(wù)商相關(guān)工作人員,他們的典型反應(yīng)如下:


 ?。头藛T)“這個我們不是很清楚,幫你轉(zhuǎn)接技術(shù)人員”。


 ?。夹g(shù)支持)“沒怎么聽說過,這個國內(nèi)好像還沒有吧?”


 ?。夹g(shù)經(jīng)理)“我們的服務(wù)器能不能加載GPU并行運算不清楚,不太了解市場有沒有這樣的需求”。


  高性能并行計算主要采用CPU+GPU的異構(gòu)模式,這種構(gòu)架已經(jīng)成功的在云服務(wù)器端實現(xiàn)資源虛擬化。但令人迷惑的是,中國國內(nèi)各大云服務(wù)商的官網(wǎng)連GPU并行運算的影子都看不到,甚至接觸過的各大公司技術(shù)服務(wù)及營銷人員似乎對GPU并行運算毫無概念。以下我們分別就幾個問題,探討這一尷尬局面的成因:


 ?。?)難道GPU并行運算目前在國內(nèi)沒有市場?


 ?。?)虛擬化GPU并行運算在國內(nèi)的實施遇見技術(shù)上的困難?


  (3)各大云服務(wù)公司管理層,是否對計算需求缺乏了解、對高性能技術(shù)發(fā)展不敏感?



 ?。?)亦或是商務(wù)決策層與先進技術(shù)圈形成脫節(jié)?


  對上述的第(1)點市場因素:如前所述,隨著圖形圖像、動畫視頻、3D運算、及大數(shù)據(jù)分析的廣泛應(yīng)用,對GPU并行運算的需求很高;而玩兒轉(zhuǎn)這種高大上的前沿計算,普通中小企業(yè)在系統(tǒng)搭建、程序開發(fā)及維護都缺乏足夠檔次的常備技術(shù)隊伍,因此非常需要云服務(wù)商的界入,降低此類技術(shù)的使用門檻,提供包括IaaS、PaaS、SaaS等整套共享租用服務(wù)。因此國內(nèi)的市場需求是非常旺盛的。


  關(guān)于上述的第(2)點技術(shù)實施因素:虛擬化GPU運用于云計算服務(wù)的技術(shù)也早已成熟。如前所述,NVIDIA公司CUDA體系與云服務(wù)器已經(jīng)有了完美的對接,在此基礎(chǔ)上美國Amazon,Google,Joyent等公司均已提供相應(yīng)的商業(yè)云計算租用服務(wù)。


  2014年1月,曙光公司、NVIDIA公司、思杰公司合作推出“云圖”(W760-G10),具備GPU硬件虛擬化的能力;雖然尚未見有明確的云租用服務(wù),但是可以看出,技術(shù)實現(xiàn)并非阻礙所在。


  對上述的(3)管理層因素:近年成長起來的國內(nèi)明星公司,如騰訊、阿里等,都經(jīng)歷了一個極短時間內(nèi)的快速膨脹,很多早期人員隨之自然升入高級管理層。然而,早期人員許多在自身的知識基礎(chǔ)、學(xué)習(xí)能力方面存著嚴重的不足。大專生去面試本科生、研究生的現(xiàn)象實屬常見。隨著公司業(yè)務(wù)的拓展,整體技術(shù)積淀不足的弱點顯露出來,管理層對技術(shù)的理解力與敏感度不夠。


  對上述的第(4)點因素:中國IT及互聯(lián)網(wǎng)的發(fā)展,曾長期奉行技術(shù)“拷貝主義”,精力心思多用于摸索中國土壤上的營利模式。中國企業(yè)對于應(yīng)用層面的市場敏感度是相當(dāng)出色的。但是,對于深層的技術(shù)策源動向,一直是忽視的。商務(wù)決策層需倚靠技術(shù)管理層的建議,而技術(shù)管理層或者自身夠不著技術(shù)前沿、或者早已脫離技術(shù)前沿;中國高??蒲袡C構(gòu)以純文章數(shù)為導(dǎo)向的研究風(fēng)氣,培養(yǎng)不出既尖端又實用的新鮮血液給企業(yè),也鮮有學(xué)術(shù)專家真正花心思做好企業(yè)顧問。種種原因,商務(wù)決策層和先進技術(shù)圈是脫節(jié)的。


  因此我們認為,對GPU并行云計算的市場需求和技術(shù)實現(xiàn)都不是問題所在。中國有志于做好云計算服務(wù)的各個公司,有必要進一步提升其技術(shù)管理層的技術(shù)素養(yǎng)、商務(wù)決策層的技術(shù)意識。


  「IT時代周刊批注」雖然全球云計算市場保持著平穩(wěn)增長的態(tài)勢,但也應(yīng)看到,各個國家間的云計算產(chǎn)業(yè)、市場和服務(wù)現(xiàn)況相距非常大。以中國為例,除了上述云服務(wù)企業(yè)存在的技術(shù)和服務(wù)因素外,傳統(tǒng)的網(wǎng)絡(luò)安全也不容忽視。有專家就指出,國內(nèi)云服務(wù)商在網(wǎng)絡(luò)安全方面的防護措施仍比較薄弱。國內(nèi)典型云服務(wù)企業(yè)發(fā)生的安全事件中有50%是傳統(tǒng)網(wǎng)絡(luò)攻擊造成的,占比達53%,隨著我國云服務(wù)用戶規(guī)模的不斷擴大,安全問題數(shù)量也將迅速增長。


  6.云計算商應(yīng)腳踏實地、聚焦本質(zhì)價值:幫助眾多中小公司運用前沿計算工具,提升中國移動互聯(lián)新經(jīng)濟的技術(shù)檔次。


  中國過去三十多年的經(jīng)濟奇跡,是從無到有、從低到高的迅速變換過程。在經(jīng)濟層次迅速攀升的年代,昨日的成功者、今日的弄潮兒,難免不受以往經(jīng)驗與習(xí)慣思維的影響。出于習(xí)慣,凡起商業(yè)項目,重視商業(yè)渠道的爭奪、善于造勢,對于產(chǎn)品內(nèi)涵價值的挖掘卻很欠缺。此種做生意的方式,不可否認在以往也取得過巨大的成功,但是我們也看到,每當(dāng)新流行概念出現(xiàn),就呈現(xiàn)“眾口一詞、一擁而上、簡單復(fù)制、同質(zhì)單一”的局面。善于熱炒,而不扎實做事,不深入挖掘概念的內(nèi)涵價值,如納米、物聯(lián)、機器人、3D打印等等流行熱點比比皆是。概念固然很好,不做實做真,終究增加不了硬實力。


  云計算服務(wù),通過將繁瑣的技術(shù)維護的移至云端,把“很難很先進”的技術(shù)功能打包封裝,降低用戶使用的技術(shù)門檻,實現(xiàn)社會智力資源共享。而現(xiàn)今中國的大大小小云服務(wù)商,簡單講就是個“遠程機房+移動大硬盤”模式,意義著實有限。當(dāng)今世界經(jīng)濟幾乎唯中國一枝獨秀,中國名企牛氣沖天,何以搞個云計算卻停留在如此低的層次?歸根結(jié)底還在于商務(wù)觀念未脫落低水平市場中粗放競爭的歷史烙印,不習(xí)慣通過深挖技術(shù)內(nèi)涵,發(fā)揮內(nèi)在價值而建立商務(wù)優(yōu)勢的路線。


  云計算作為一個“很實在很技術(shù)”東西,服務(wù)對象是商業(yè)應(yīng)用型公司,具有理智化決策的行為特征。腦白金式的蒙蔽營銷手法登峰造極,放在這里卻未必有效。中國的移動互聯(lián)新經(jīng)濟在應(yīng)用層面,欣欣向榮,活力四射,全世界數(shù)一數(shù)二。相應(yīng)的,云計算服務(wù)作為其龍骨支撐,不跟上是不行的。大量的視頻音圖+3D+規(guī)模機器學(xué)習(xí)+大數(shù)據(jù)分析 =》高強度計算任務(wù) =》云GPU并行運算,這是一個非常簡單明了的推導(dǎo)鏈條。何必瞻前顧后,剪不斷理還亂?


來源:通信世界網(wǎng)    祁海江



  版權(quán)及免責(zé)聲明:凡本網(wǎng)所屬版權(quán)作品,轉(zhuǎn)載時須獲得授權(quán)并注明來源“中國產(chǎn)業(yè)經(jīng)濟信息網(wǎng)”,違者本網(wǎng)將保留追究其相關(guān)法律責(zé)任的權(quán)力。凡轉(zhuǎn)載文章,不代表本網(wǎng)觀點和立場。版權(quán)事宜請聯(lián)系:010-65363056。

延伸閱讀

熱點視頻

第六屆中國報業(yè)黨建工作座談會(1) 第六屆中國報業(yè)黨建工作座談會(1)

熱點新聞

熱點輿情

特色小鎮(zhèn)

版權(quán)所有:中國產(chǎn)業(yè)經(jīng)濟信息網(wǎng)京ICP備11041399號-2京公網(wǎng)安備11010502003583