世界級(jí)集群渲染落戶上海
訪上海渲染投資管理有限公司
World-class Render Farm in Shanghai
EDITOR…孫瞳


編者按:從2006年開(kāi)始,中國(guó)的影視外包項(xiàng)目日益增多,這其中由以影視動(dòng)畫(huà)外包對(duì)于硬件需求最為明顯,國(guó)內(nèi)除了華龍和央視數(shù)碼等少數(shù)幾個(gè)國(guó)有背景的數(shù)字影視制作公司有不錯(cuò)的硬件設(shè)備外,大多數(shù)公司只能痛苦的自己解決硬件集群渲染的壓力。隨著數(shù)字創(chuàng)意產(chǎn)業(yè)逐漸進(jìn)入正規(guī),如今行業(yè)已經(jīng)從06年的“教育需求年”開(kāi)始向07年的“企業(yè)需求年”轉(zhuǎn)變,這之中最有代表性的事件就是北京軟件協(xié)會(huì)針對(duì)數(shù)字創(chuàng)意產(chǎn)業(yè)進(jìn)行的北京企業(yè)硬件需求調(diào)研,以及前不久由特新與我們雜志一起操作的集群渲染研討會(huì)企業(yè)積極參與。這都側(cè)面印證了我刊對(duì)于“企業(yè)需求年”的判斷。前不久我們從業(yè)內(nèi)了解到上海一家公司正在并已經(jīng)建設(shè)國(guó)內(nèi)最大的集群渲染設(shè)備,針對(duì)這個(gè)世界級(jí)的設(shè)備投入,我刊記者采訪了這家新興且頗具實(shí)力的公司――上海渲染投資管理有限公司進(jìn)行了專訪。本次接受我們采訪的是王疆皓(染農(nóng)場(chǎng)公共平臺(tái)(上海)主任)和Shiny現(xiàn)任CG渲染農(nóng)場(chǎng)公共平臺(tái)(上海)架構(gòu)總監(jiān)。
info

世界級(jí)集群渲染落戶上海
王疆皓介紹
現(xiàn)任上海渲染投資管理有限公司渲染農(nóng)場(chǎng)公共平臺(tái)(上海)主任
長(zhǎng)期從事CG相關(guān)大型項(xiàng)目的運(yùn)營(yíng)及運(yùn)做,對(duì)CG行業(yè)資本運(yùn)做及資源對(duì)接有較多成功案例,現(xiàn)正無(wú)償為組織百家高手特效聯(lián)盟承接國(guó)外大單潛心奮斗。

 

Shiny介紹
現(xiàn)任CG渲染農(nóng)場(chǎng)公共平臺(tái)(上海)架構(gòu)總監(jiān)。
中國(guó)最早承接國(guó)外一流電影特效公司外單的技術(shù)先鋒之一,參與過(guò)多部大型動(dòng)畫(huà)電影;具備比較強(qiáng)的故事編導(dǎo)能力;深諳成熟CG市場(chǎng)的整套運(yùn)營(yíng)模式;98年后轉(zhuǎn)型做外包業(yè)務(wù)中方質(zhì)監(jiān),尤其熟悉多數(shù)國(guó)外數(shù)字及特效外包公司及發(fā)包人,業(yè)務(wù)渠道廣泛,籌措成功過(guò)多次中外CG業(yè)務(wù)雙選會(huì);近幾年著重研究高端硬件的優(yōu)化搭建及高速存儲(chǔ)系統(tǒng)等。現(xiàn)任CG渲染農(nóng)場(chǎng)公共平臺(tái)(上海)架構(gòu)總監(jiān)。

世界級(jí)集群渲染落戶上海

Q :首先很高興能和您兩位交流,通過(guò)我們刊物可以更多的介紹貴企業(yè)的觀點(diǎn)以及作為公共平臺(tái)能為行業(yè)帶來(lái)的服務(wù)。我們采訪的第一個(gè)問(wèn)題是:貴公司為什么要在數(shù)字創(chuàng)意產(chǎn)業(yè)的各個(gè)環(huán)節(jié)中選擇投入到硬件設(shè)備平臺(tái)搭建這個(gè)領(lǐng)域?是如何考慮的?

A:首先我們認(rèn)為未來(lái)的行業(yè)必將是場(chǎng)硬件支撐起來(lái)的變革來(lái)決定企業(yè)的去留或定位的根本性問(wèn)題,到時(shí)候,很多企業(yè)可能因?yàn)橛布摹盁o(wú)可奈何”導(dǎo)致沒(méi)有飯吃。我們觀點(diǎn)的基礎(chǔ)可以從身邊的例子看出, Pixer從《玩具總動(dòng)員》到《小鼠大廚》幾乎每年一部影片,試想在一個(gè)極其規(guī)范的電影市場(chǎng)下的動(dòng)畫(huà)公司,沒(méi)有強(qiáng)有力的硬件支持,沒(méi)有效率和質(zhì)量并衡的保證,怎么會(huì)贏得數(shù)字娛樂(lè)產(chǎn)業(yè)資本市場(chǎng)的屢屢青睞?我們身邊的很多企業(yè)制作完成相當(dāng)數(shù)量要求的項(xiàng)目能力已經(jīng)比較強(qiáng),但由于設(shè)備的問(wèn)題很多長(zhǎng)期或者大型的國(guó)內(nèi)外項(xiàng)目不敢承接,這也是處于對(duì)消化大型項(xiàng)目的綜合能力信心不足的表現(xiàn)。

本應(yīng)該是一條起跑線上的硬件環(huán)節(jié),國(guó)內(nèi)卻因?yàn)槎喾N原因從來(lái)不足夠重視,這幾年差距越來(lái)越大,比如我在日本看到2年前的設(shè)備在中國(guó)居然都是最高端的鎮(zhèn)山之寶,會(huì)全面成熟操控的人沒(méi)有,在公司里是擺設(shè)。如果說(shuō)目前這些還屬于隱性問(wèn)題。那么當(dāng)客戶的要求全面提升到高清標(biāo)準(zhǔn)或電影標(biāo)準(zhǔn)時(shí)再絢麗的特效制作能力也通過(guò)不了硬件限制的壁壘。

世界級(jí)集群渲染落戶上海
--專業(yè)的CG硬件服務(wù)平臺(tái)可以有效規(guī)避企業(yè)的投資風(fēng)險(xiǎn)并幫助企業(yè)贏得更多訂單。中小企業(yè)這些優(yōu)質(zhì)股很容易在市場(chǎng)競(jìng)爭(zhēng)中因?yàn)橛布款i被抹殺。大企業(yè)因?yàn)橘Y金占用大而沒(méi)有專業(yè)的服務(wù)商切實(shí)的解決架構(gòu)、搭建、回收問(wèn)題,淘汰周期快,弄不好就會(huì)因?yàn)橐淮斡布顿Y而損失巨大。


Q兩位如何認(rèn)為目前中國(guó)CG企業(yè)的硬件設(shè)備的采購(gòu)問(wèn)題,而硬件對(duì)企業(yè)生產(chǎn)有哪些制約?
A:中國(guó)很多的CG企業(yè)都面臨一個(gè)硬件更新速度快及種類繁多的階段,于是大家開(kāi)始考慮淘汰、置換、購(gòu)買等方式去解決一些效率和質(zhì)量問(wèn)題,但是往往不能如愿。問(wèn)題的關(guān)鍵在于沒(méi)有從多方面解決硬件設(shè)備更新區(qū)隔的問(wèn)題,沒(méi)有專業(yè)的CG硬件工程師去為一線制作人做預(yù)算與效率的權(quán)衡。這樣的解決方案在中國(guó)要考慮實(shí)際情況,不然只是滿足速度丟掉穩(wěn)定性;所以,硬件解決辦法已經(jīng)成為了現(xiàn)在CG企業(yè)非常頭疼的一個(gè)問(wèn)題,而我們就是用中國(guó)最好的硬件渠道和專業(yè)CG硬件人才搭建的渲染平臺(tái),幫助每個(gè)愿意和我們合作的伙伴解決一切因硬件導(dǎo)致的CG生產(chǎn)難題。

Q:專業(yè)的CG硬件服務(wù)平臺(tái)可以有效規(guī)避企業(yè)的投資風(fēng)險(xiǎn)并幫助企業(yè)贏得更多訂單。從技術(shù)角度上講你們?cè)趺纯创秩巨r(nóng)場(chǎng)公共平臺(tái)的技術(shù)和硬件優(yōu)勢(shì)?
TIPS:渲染農(nóng)場(chǎng)(Renderfarm)其實(shí)就是“分布式并行集群計(jì)算系統(tǒng)”,這是一種利用現(xiàn)成的CPU、網(wǎng)絡(luò)負(fù)載和操作系統(tǒng)構(gòu)建的超級(jí)計(jì)算機(jī),它使用主流的商業(yè)計(jì)算機(jī)硬件設(shè)備達(dá)到或接近超級(jí)計(jì)算機(jī)的計(jì)算能力。集群(cluster)指的是一組計(jì)算機(jī)通過(guò)通信協(xié)議連接在一起的計(jì)算機(jī)群,它們能夠?qū)⒐ぷ髫?fù)載從一個(gè)超載的計(jì)算機(jī)遷移到集群中的其他計(jì)算機(jī)上,這一特性稱為負(fù)載均衡(load balancing),它的目標(biāo)是使用主流的硬件設(shè)備組成網(wǎng)格計(jì)算能力,達(dá)到、甚至超過(guò)天價(jià)的超級(jí)計(jì)算機(jī)的計(jì)算性能。
A:以往渲染農(nóng)場(chǎng)在架構(gòu)、管理、網(wǎng)絡(luò)方面不是很理想,為此我們用2年時(shí)間自主研發(fā)解決了多項(xiàng)技術(shù)難題,使之管理更簡(jiǎn)單,運(yùn)行更優(yōu)化、穩(wěn)定。
從速度角度來(lái)講是CG人自己的設(shè)備無(wú)法想象的,舉個(gè)例子,現(xiàn)在的建筑動(dòng)畫(huà)5分鐘短片,生產(chǎn)出來(lái)也就2小時(shí)左右;什么概念,原來(lái)他們一個(gè)月一半時(shí)間花在渲染上了,現(xiàn)在看部電影就完成了,效率大大提高。

世界級(jí)集群渲染落戶上海


TIPS:在采訪中兩位專家又給我們介紹了CG渲染農(nóng)場(chǎng)公共平臺(tái)(上海)所能達(dá)到的綜合指標(biāo)。在此編輯進(jìn)行了整理羅列:
1、 自主研發(fā)的管理軟件。管理這些CPU要達(dá)到分布并行計(jì)算,一般來(lái)說(shuō)最好有集群管理軟件,主流的集群管理軟件有比較多的軟硬件方面的限制,必須每臺(tái)節(jié)點(diǎn)機(jī)器都安裝渲染場(chǎng)景所需的各類應(yīng)用軟件,費(fèi)用加大不說(shuō),優(yōu)化很難做到,穩(wěn)定性也不好,裝的越多,沖突越大;而且這些集群管理軟件不是對(duì)所有軟件、插件、渲染器都支持的;如果不能解決這個(gè)問(wèn)題,就很難滿足有特殊偏好的人的渲染文件順利渲染。我們?yōu)榇送度氪罅抠Y金,聯(lián)合多方行業(yè)怪才自主研發(fā)了一套搭建簡(jiǎn)便、管理簡(jiǎn)單、界面清晰的集群軟件“Top-Render”,此套軟件真正做到了無(wú)縫并行計(jì)算,所有節(jié)點(diǎn)設(shè)備都只需安裝操作系統(tǒng)(更為簡(jiǎn)潔明了的自創(chuàng)Mini Linux系統(tǒng));無(wú)須加載任何應(yīng)用軟件,通過(guò)管理機(jī)即可做到調(diào)動(dòng)全部管理范圍內(nèi)CPU參與渲染計(jì)算任務(wù);對(duì)渲染任務(wù)無(wú)限制,自動(dòng)列隊(duì),自動(dòng)調(diào)取與存儲(chǔ)。真正做到1臺(tái)管理機(jī)可管無(wú)數(shù)個(gè)CPU,直至網(wǎng)絡(luò)負(fù)載極限。此種集群方法比傳統(tǒng)搭建模式省去了大量節(jié)點(diǎn)機(jī)高額軟件費(fèi)用與超長(zhǎng)時(shí)間,管理更自由,速度更快,應(yīng)用性更高,資源得到更大化應(yīng)用的同時(shí)還省電。
2、 全4GB光纖網(wǎng)絡(luò)系統(tǒng)。搭建渲染農(nóng)場(chǎng)需要把分離的CPU調(diào)集起來(lái)同時(shí)運(yùn)算單一(復(fù)合)任務(wù),傳統(tǒng)做法是通過(guò)以太網(wǎng)做負(fù)載均衡;這也是我很反感的,以太網(wǎng)負(fù)載限制很多,主流的現(xiàn)在也就是個(gè)1GB帶寬,實(shí)際傳輸速度就更慢,只能滿足低負(fù)荷運(yùn)載的需求,而且以太網(wǎng)的基礎(chǔ)是TCP/IP協(xié)議,需要通過(guò)尋址后進(jìn)行IP管理,這個(gè)太麻煩而且隱患很多,搞不好就找不到某個(gè)節(jié)點(diǎn)機(jī)器了。更重要的是:“如此低的傳輸速度導(dǎo)致的網(wǎng)絡(luò)延遲是很明顯的,如果是大場(chǎng)景的電影文件,延遲最高能達(dá)到40%;甚至延遲等待,報(bào)錯(cuò);這個(gè)會(huì)白白浪費(fèi)來(lái)此渲染的公司大量金錢與時(shí)間。而解決網(wǎng)絡(luò)傳輸速度的問(wèn)題只能依靠光纖了,但從來(lái)還沒(méi)有運(yùn)行在光纖網(wǎng)絡(luò)上的渲染集群;連加拿大蒙特利爾最大的渲染中心都是用的TCP/IP協(xié)議;這就對(duì)我們提出了 相當(dāng)大的難題;這個(gè)過(guò)程耗費(fèi)了一年時(shí)間,我們這里有好多設(shè)備是一年多前購(gòu)買的,就是在反復(fù)測(cè)試,反復(fù)研究。在此要誠(chéng)摯的感謝愛(ài)爾蘭及加拿大EMC公司的VINCE、Johnson,Brocade公司的Dwayne、MS張與我們一起的研究和對(duì)我們提供的大量幫助。終于,我們將集群管理平臺(tái)搭建在了全4GB通道的光纖網(wǎng)絡(luò)架構(gòu)上,所有的PC機(jī)及刀片均裝載有4GB的HBA卡;而場(chǎng)景文件調(diào)取設(shè)備和最終完成存儲(chǔ)設(shè)備更是使用了AWAYA的10GB雙工通道HBA卡(光纖交換機(jī)使用的是48口4GB+4口10GB的高端產(chǎn)品),網(wǎng)絡(luò)延遲對(duì)我們來(lái)說(shuō)已經(jīng)是個(gè)笑話,管理還更簡(jiǎn)單,徹底杜絕干擾、掉線、不穩(wěn)定、速度不均衡的技術(shù)難題。在此我可以很自豪的說(shuō),此套網(wǎng)絡(luò)負(fù)載系統(tǒng)是目前世界領(lǐng)先,國(guó)內(nèi)絕對(duì)唯一的。這個(gè)問(wèn)題的解決將從根本上滿足對(duì)超級(jí)電影場(chǎng)景、大型科學(xué)、天文、地質(zhì)數(shù)據(jù)集合運(yùn)算的應(yīng)用,尤其是1000個(gè)CPU計(jì)算單一任務(wù),并從一套存儲(chǔ)上調(diào)取相同索引文件的詬病,試問(wèn)誰(shuí)能做到?飛機(jī)的速度肯定比靠車輪的快。
3、 絕對(duì)的安全、保密、高速存儲(chǔ)系統(tǒng)。實(shí)行自動(dòng)分區(qū)存儲(chǔ),每個(gè)人都能實(shí)時(shí)看到自己的完成文件,別人根本看不到你的半點(diǎn)信息,發(fā)現(xiàn)有設(shè)計(jì)方面的問(wèn)題能及時(shí)進(jìn)行修改,在平臺(tái)專為每個(gè)客戶配備的超級(jí)圖形工作站上就能進(jìn)行修改,省卻大量時(shí)間。60TB的4GB通道存儲(chǔ)容量足夠裝下幾部電影的原文件了。
4、 無(wú)可超越的后期硬件優(yōu)勢(shì),平臺(tái)所有設(shè)備均達(dá)到了SD-4K甚至8K的渲染生產(chǎn)能力,后期具備SD-4K的全線制作設(shè)備,連最高端的配光校色系統(tǒng)都將在平臺(tái)運(yùn)行;你的一切想法均可不受限制的完美暢快實(shí)現(xiàn)。屆時(shí),使用平臺(tái)后期設(shè)備的作品將在各個(gè)方面提升畫(huà)面品質(zhì)!
5、 網(wǎng)絡(luò)提交渲染的絕對(duì)優(yōu)勢(shì),之前還沒(méi)有人這樣做過(guò)。本平臺(tái)的建立是旨在為全世界所有CG制作公司提供力所能及的渲染服務(wù)(技術(shù)支持),平臺(tái)全部建設(shè)完畢具備3000個(gè)CPU同時(shí)運(yùn)算的能力。不需要每位客戶都蒞臨現(xiàn)場(chǎng)才能渲染,尤其是外地或國(guó)外客戶想要親臨將會(huì)白白增大渲染的他項(xiàng)支出,不符合平臺(tái)省錢省時(shí)的建設(shè)初衷;因此非上海的所有客戶均可通過(guò)專用FTP網(wǎng)絡(luò)提交方式進(jìn)行網(wǎng)絡(luò)自助渲染,渲染完畢后您就可通過(guò)服務(wù)網(wǎng)站的專用FTP軟件迅捷的下載已經(jīng)打包好的成品文件,10M的多線專用帶寬保證您的下載與渲染一樣暢快淋漓。哪怕是一張效果圖也可以通過(guò)網(wǎng)絡(luò)提交方式渲染,事半功倍;犧牲夢(mèng)幻效果來(lái)成全渲染的時(shí)代徹底終結(jié),您的設(shè)備永遠(yuǎn)只需要設(shè)計(jì)或制作,我們來(lái)為您批量的輸出。
6、 渲染瓶頸的解決。渲染農(nóng)場(chǎng)解決了高密度任務(wù)計(jì)算不了的本質(zhì)問(wèn)題,可以調(diào)動(dòng)多CPU同時(shí)計(jì)算單一任務(wù),無(wú)論你是什么計(jì)算任務(wù),只要在合理計(jì)算范圍內(nèi),理論上我們都能通過(guò)優(yōu)化調(diào)配進(jìn)行正常計(jì)算。比如三維方面的渲染問(wèn)題,有些復(fù)雜、精度高的場(chǎng)景對(duì)內(nèi)存、整體環(huán)境的要求很高,往往渲染中是報(bào)錯(cuò)或沒(méi)有反應(yīng)的, 在渲染農(nóng)場(chǎng)這些問(wèn)題都得到了很好的解決??梢院茏孕诺恼f(shuō),解決您的一切渲染難題,所有奇幻的奇思妙想均可在實(shí)際項(xiàng)目中馳騁飛揚(yáng);徹底終結(jié)因渲染惡疾犧牲極至效果的悲慘往昔;趕超頂尖技術(shù)的豪邁激情不會(huì)因硬件的瓶頸自嘲為癡心妄想;五千年的深厚文化根基不會(huì)因?yàn)楸憩F(xiàn)方式的單一變得蒼白無(wú)力!


TIPS:CG渲染農(nóng)場(chǎng)公共平臺(tái)(上海)設(shè)備數(shù)據(jù)
Tyan S2891/2892 100套 共5組(20套一組渲染機(jī),2臺(tái)調(diào)取、存儲(chǔ)機(jī),1臺(tái)操作機(jī))
配置:2顆AMD OP 285 CPU、2GB英飛凌DDR400ECC、1臺(tái)HP DL 100G2、146G/臺(tái)SEA SICS73GB 15K 320MB/S
??????????????????
HP BL45P 40套 共2組
配置:2顆HP/AMD OP 2218 CPU、4GB HP Pc5300 ECC、1臺(tái)HP BL 25P、72GB/臺(tái)72GB 10K SAS2.5HP HDDAL、1片/臺(tái) HP/LOGIC BLC1105 FC
---------------------------------------
HP bl45P 10套 共一組 (10套一組渲染機(jī),2臺(tái)調(diào)取、存儲(chǔ)機(jī),1臺(tái)操作機(jī))
配置:4顆HP/AMD OP 8220SE、16GB HP Pc5300 ECC、1臺(tái)/組 HP BL25P、72GB/臺(tái)72GB 10K SAS2.5HP HDDAL、1片/臺(tái) HP FC 2242SR PCI-E/DC HBA
----------------------------------------------
HP BLC685 24套 共3組(8套一組渲染機(jī),2臺(tái)調(diào)取、存儲(chǔ)機(jī),1臺(tái)操作機(jī))
配置:4顆HP/AMD OP 8218、16-64GB HP Pc5300 ECC、1臺(tái)/組 HP BL25P、72GB/臺(tái)72GB 10K SAS 2.5HP HDDAL、1片/臺(tái) HP BLC CPE 1105FC HE


Q:我聽(tīng)說(shuō)您這里以后將會(huì)面對(duì)全CG行業(yè)提供高端硬件設(shè)備的租賃、銷售、咨詢等代理服務(wù)?
A:是的,我們的渲染農(nóng)場(chǎng)公共平臺(tái)是在國(guó)家2個(gè)部委5個(gè)部門大力扶持下構(gòu)建起來(lái),取得了很多資金支持與政策扶持。飲水思源,我們將本著半公益的思路助力中國(guó)CG行業(yè)高速發(fā)展,除了渲染方面的支持外;我們還提供大批高端設(shè)備短、長(zhǎng)期租賃服務(wù);為他們降低風(fēng)險(xiǎn),節(jié)省投資;而CG企業(yè)需要采購(gòu)更新設(shè)備時(shí),我們將利用我們的渠道以最優(yōu)惠的價(jià)格幫他們搭建最合適的產(chǎn)品平臺(tái)。至于咨詢服務(wù),可以通過(guò)我們的網(wǎng)站在線咨詢,我們的專業(yè)工程師將為他們提出優(yōu)化合理建議;并提供諸多品質(zhì)有保證的代理信息。


  “我覺(jué)的最大推動(dòng)就是完成了這個(gè)行業(yè)里的環(huán)節(jié)關(guān)聯(lián)化,行業(yè)所有的環(huán)節(jié)只有匹配了,那才有產(chǎn)業(yè)化的可能,否則就是這山望著那山高?!彼麄冞@樣談?wù)撨@自己在行業(yè)中所扮演的角色。除了設(shè)備平臺(tái)搭建外兩位負(fù)責(zé)人也與我們交流了下一步的企業(yè)發(fā)展策略,“這個(gè)平臺(tái)也會(huì)逐步的肩負(fù)一種資源對(duì)接、交流、互換的功能,你有好的項(xiàng)目我們提供好的實(shí)現(xiàn)服務(wù),你有的好技術(shù)我們提供好的應(yīng)用領(lǐng)域,你有好的資金我們給你找好的項(xiàng)目和團(tuán)隊(duì)等等,一個(gè)立體資源交互的平臺(tái)將是我們渲染農(nóng)場(chǎng)硬件平臺(tái)所創(chuàng)造出來(lái)的附加,也只有通過(guò)我們高端的平臺(tái),好的資源和資本才能對(duì)接起來(lái)。”簡(jiǎn)單的話語(yǔ)中透露的這家企業(yè)對(duì)于行業(yè)的信心也表露著新一批投身數(shù)字創(chuàng)意產(chǎn)業(yè)的企業(yè)推動(dòng)中國(guó)行業(yè)整體性發(fā)展的決心,宏大的目標(biāo)期待更多有這樣實(shí)力的公司能加入進(jìn)來(lái),一起提供加入這個(gè)平臺(tái),這個(gè)平臺(tái)就像一條紐帶,機(jī)會(huì)人人都可以爭(zhēng)?。′秩局?,暢快淋漓;因?yàn)樗俣?,因?yàn)樾剩驗(yàn)橄硎芤涣鞣?wù)的同時(shí)還能拓寬發(fā)展的機(jī)遇。“這個(gè)平臺(tái)針對(duì)制作能力突出的CG企業(yè)特設(shè)免費(fèi)集中宣傳展示周;希望我們的盡心盡力能對(duì)您企業(yè)的騰飛起到綿薄之力,祝福行業(yè)、祝福大家!謝謝!”

相關(guān)事宜咨詢:cgrsh@hotmail.com

標(biāo)簽:

相關(guān)文章

隨機(jī)推薦