VR次元 孟倩 3月8日?qǐng)?bào)道
當(dāng)人們沉浸在VR視覺的震撼效果中時(shí)，很多人似乎都忽略了VR的聲音。在VR內(nèi)容中沉浸感不僅產(chǎn)生于視覺部分，還來源于聽覺部分。在騰訊科技與時(shí)代拓靈創(chuàng)始人孫學(xué)京博士的對(duì)話中，孫博士告訴記者，有效利用全景聲的VR內(nèi)容，音頻可以占到沉浸感體驗(yàn)的50%。簡(jiǎn)而言之，聲音在VR里尤為重要。
VR內(nèi)容產(chǎn)業(yè)鏈最上游是擁有原始版權(quán)的IP方，最下游是頭盔等可顯示內(nèi)容的頭顯，這中間內(nèi)容如何產(chǎn)生。正是孫學(xué)京博士與其團(tuán)隊(duì)正在研究的事情。內(nèi)容為王的時(shí)代，時(shí)代拓靈以內(nèi)容為落腳點(diǎn)切入到VR這個(gè)領(lǐng)域，旨在用技術(shù)解決VR內(nèi)容匱乏的問題。這不僅基于其多年以來的技術(shù)優(yōu)勢(shì)，還來源于創(chuàng)始團(tuán)隊(duì)70后成員的文藝情懷。
時(shí)代拓靈的英文名字為Twirling in Time，是一首來自凱文.科恩的鋼琴曲，意為時(shí)光流轉(zhuǎn)，記錄聲音和過去珍貴的回憶。時(shí)代拓靈致力于VR音視頻的制作，同時(shí)對(duì)全景視頻和音頻發(fā)力，尤其是在VR 音頻方面填補(bǔ)了國(guó)內(nèi)的空白。
留美博士放棄高薪工作 熱愛音樂用聲音改造VR
轉(zhuǎn)播到騰訊微博
孫學(xué)京清楚的記得公司注冊(cè)日期為2015年5月22日，而他辭職的日期為2015年6月1日。孫博士說，把自己技術(shù)方面的經(jīng)驗(yàn)用到更大的平臺(tái)上，這是一直以來的想法，創(chuàng)業(yè)是需要基因的。
孫學(xué)京北大本科以后直讀美國(guó)西北大學(xué)博士，畢業(yè)后在美國(guó)科技企業(yè)從事聲音處理前沿算法研究多年，擁有了 90 多篇學(xué)術(shù)論文和專利技術(shù)，期間擔(dān)任過杜比實(shí)驗(yàn)室 Dolby Voice 項(xiàng)目的主要負(fù)責(zé)人，最大藍(lán)牙芯片廠商 CSR 音頻 CVC 套件核心開發(fā)人員。
這樣一位擁有豐富技術(shù)經(jīng)驗(yàn)的博士放棄掉自己高薪穩(wěn)定的工作，開始他真正的創(chuàng)業(yè)人生。
故事還得從那年北大圖書館前的草坪談起，那時(shí)這是北大學(xué)子的圣地，大家聚在一起彈彈吉他，玩搖滾音樂，釋放文藝情懷。孫學(xué)京回憶起，那個(gè)年代是中國(guó)搖滾非常繁榮的一段時(shí)期，像鄭鈞，高曉松，唐朝，黑豹都是那時(shí)火起來的。作為活躍的音樂愛好者，他曾經(jīng)為了舉辦一場(chǎng)搖滾音樂節(jié)注冊(cè)一個(gè)社團(tuán)，最后卻因種種原因未能成行。
這種情懷，也就駐扎在孫學(xué)京的心里。海外工作13年，每逢春節(jié)回到家中，孫學(xué)京就會(huì)和家人拿起自己擅長(zhǎng)的樂器，合奏一曲。他利用自己的技術(shù)經(jīng)驗(yàn)往往將這種珍貴的聲音錄成環(huán)繞聲。
在之前的工作中，孫學(xué)京也嘗試過進(jìn)行VR項(xiàng)目的內(nèi)部孵化。這一次他拉上了和他相熟已久的原麥田(微博)守望者樂隊(duì)主創(chuàng)劉恩�；趯�(duì)音樂的熱愛和文藝的情懷，他們一拍即合，做和聲音相關(guān)的VR，順理成章，更是興趣使然。
團(tuán)隊(duì)的三位創(chuàng)始人分別有自己擅長(zhǎng)的方面，孫學(xué)京擁有豐富的技術(shù)經(jīng)驗(yàn)，劉恩作為娛樂圈的一員，主要做市場(chǎng)部分，另一位創(chuàng)始人張旭，則偏向運(yùn)營(yíng)方面。這三人的組合令團(tuán)隊(duì)迅速運(yùn)轉(zhuǎn)起來，從去年5月至今，技術(shù)方面的研發(fā)和藝術(shù)方面的合作如火如荼的開展起來。
孫學(xué)京說，像我們這種年齡比較大的人創(chuàng)業(yè)，就是要嘗試想要做的事情。Follow your heart。
VR除了視覺還有聽覺 音頻可達(dá)沉浸感體驗(yàn)的50%
轉(zhuǎn)播到騰訊微博
孫學(xué)京說當(dāng)時(shí)劉恩和我們?cè)谙胍魳纺芨泓c(diǎn)什么，音頻是大家關(guān)注比較少的一點(diǎn)，但是在VR里音頻的重要性得到了極大的提升。像美國(guó)做音視頻質(zhì)量較高的公司，音頻可以占到沉浸感體驗(yàn)的50%。
虛擬現(xiàn)實(shí)里，尤其是全景，如果沒有聲音，沉浸感就會(huì)下降。既然虛擬現(xiàn)實(shí)，那么就要模擬現(xiàn)實(shí)的百分之百，聲音也是非常重要的一部分。
目前孫學(xué)京和他的團(tuán)隊(duì)致力于全景聲和全景視頻，主要發(fā)力在全景音視頻的制作上。 時(shí)代拓靈目前擁有自主開發(fā)的視頻拼接技術(shù)、一個(gè)可以實(shí)時(shí)捕獲三維環(huán)境聲音的 360 聲場(chǎng)一體錄制機(jī)，還將推出面向全球的支持批量生產(chǎn)全景音視頻內(nèi)容的云服務(wù)。
當(dāng)然孫學(xué)京和他的團(tuán)隊(duì)最為突出的還是在音頻方面，VR聲音制作一般分為兩步，一是用聲場(chǎng)錄制機(jī)現(xiàn)場(chǎng)錄立體聲，類似于同期聲。他的團(tuán)隊(duì)研發(fā)的360 聲場(chǎng)一體錄制機(jī)適用于VR，對(duì)聲場(chǎng)進(jìn)行操控，突破了地點(diǎn)的限制，同時(shí)還便于攜帶，這屬于內(nèi)容的入口。
二是做后期處理，把很多軌音拿過來，按照意圖方位遠(yuǎn)近然后用景聲渲染引擎加工。每個(gè)聲音在任何一個(gè)時(shí)刻，在三維空間里的位置，是需要精確的。用三維就是要描述一個(gè)對(duì)象在空間里的軌跡，有數(shù)據(jù)就可以用算法渲染出來。在VR里面還需要得到陀螺儀和頭盔，人的頭部運(yùn)動(dòng)的信息，把這些角度的信息也給渲染工具，根據(jù)信息來調(diào)整物體的所有位置。
目前一個(gè)難點(diǎn)在于VR聲音的修改，VR的音頻還沒有完全的標(biāo)準(zhǔn)化。如何與藝術(shù)家合作，怎么讓這個(gè)道路更順暢，要定義一個(gè)流程。孫學(xué)京說，我們是早期的，就得吃這個(gè)苦，得去摸索一個(gè)路。他表示團(tuán)隊(duì)中有自己的算法工程師，同時(shí)也有第一批混音師，可以在文件里面改參數(shù)，不斷打磨流程。追求高品質(zhì)內(nèi)容是孫學(xué)京團(tuán)隊(duì)的目標(biāo)，但是這將通過與內(nèi)容方合作來實(shí)現(xiàn)。
有錄制這一端，也有播放這一端。他們要做的接下來就是一個(gè)軟件，其實(shí)就是播放器�，F(xiàn)在這個(gè)階段還沒有一個(gè)標(biāo)準(zhǔn)，VR聲音只能用SDK打包到播放器內(nèi)播出。并且這種架構(gòu)不會(huì)卡不會(huì)頓，優(yōu)勢(shì)很大。把SDK規(guī)�；�，只要符合的格式，都可以用他們團(tuán)隊(duì)的渲染引擎去做，最終可發(fā)展為深度定制優(yōu)化。這是一個(gè)潛在的贏利點(diǎn)，同時(shí)這是孫學(xué)京和他的團(tuán)隊(duì)今后要探索的路。
除此之外孫學(xué)京和他的團(tuán)隊(duì)還掌握了自主開發(fā)的視頻拼接技術(shù)，可進(jìn)行全景視頻的制作。他透露他們一整套內(nèi)容方面的服務(wù)已和多家內(nèi)容制作方在合作中，時(shí)代拓靈要爭(zhēng)取在一個(gè)月內(nèi)正式上線商用。
VR將成為生活的一部分 市場(chǎng)會(huì)驗(yàn)證VR的未來
轉(zhuǎn)播到騰訊微博
VR今年很火，但其實(shí)在消費(fèi)者群體里并沒有那么普及。時(shí)代拓靈做了VR里更細(xì)致的一部分——音頻。從音頻切入，在國(guó)內(nèi)還是比較少見，而國(guó)外其實(shí)已經(jīng)有非常多精致的作品運(yùn)用了全景聲音，國(guó)內(nèi)大部分還是立體聲，這是非常脫節(jié)的。
孫學(xué)京說目前他們的團(tuán)隊(duì)領(lǐng)先其他團(tuán)隊(duì)一段時(shí)間，希望未來可以保持技術(shù)上的優(yōu)勢(shì)。現(xiàn)在的發(fā)展情況完全證明了他們當(dāng)初成立公司的一個(gè)預(yù)見，VR聲音在中國(guó)屬于稀缺品。他談到在美國(guó)現(xiàn)在普通老百姓對(duì)VR的認(rèn)知程度比較高了，長(zhǎng)遠(yuǎn)來說中國(guó)的市場(chǎng)其實(shí)足夠大。
VR聲音這是一個(gè)具有前瞻性的東西，最早看全景音樂會(huì)就可以體會(huì)到一定是這樣的形式。孫學(xué)京回想起當(dāng)初對(duì)VR聲音的判斷。VR可能一周消費(fèi)一次，和傳統(tǒng)的東西并存，并且會(huì)成為家居和生活的一部分。
VR實(shí)際上帶來了一個(gè)新奇的體驗(yàn)，并且適用面非常廣，不同的人有不同的需求，目前的火爆是有一定原因的。孫學(xué)京表示市場(chǎng)是對(duì)的，現(xiàn)在有很多人在看這個(gè)市場(chǎng)，大方向就擺在這里。雖然目前體驗(yàn)尚待提升，但是VR還是有自己的存在價(jià)值的。而他們看好此方向，對(duì)未來的云服務(wù)的想象也是可見的，讓所有制作VR內(nèi)容的人進(jìn)入這個(gè)領(lǐng)域門檻更低。目前面向TO B，而TO C 則可能做平臺(tái)做社區(qū)甚至移動(dòng)社交，這還是比較遙遠(yuǎn)的事情。
投身到VR這樣一個(gè)新的平臺(tái)上，孫學(xué)京說，70后創(chuàng)業(yè)和年輕人會(huì)差很多，我們會(huì)比較穩(wěn)定，心理上更成熟一些，但是在創(chuàng)業(yè)上我們還是新手。目前公司的發(fā)展速度已經(jīng)基本達(dá)到預(yù)期，而今后孫學(xué)京說要在技術(shù)上保持領(lǐng)先性，還要積極在VR音視頻標(biāo)準(zhǔn)上參與，成為領(lǐng)導(dǎo)者。成為一個(gè)主要的服務(wù)提供者，這是他們的長(zhǎng)期目標(biāo)。
最后，作為一名70后創(chuàng)業(yè)者，孫學(xué)京對(duì)創(chuàng)業(yè)給了一些懇切的意見：
一、年輕人創(chuàng)業(yè)是非常好的一件事，現(xiàn)在整體環(huán)境非常有利于年輕人創(chuàng)業(yè)。他奉勸年輕人不要盲目，不要為了創(chuàng)業(yè)而創(chuàng)業(yè)。要衡量好自己是個(gè)什么樣的人，要做的事是不是自己想做的事。
二、同時(shí)如果不創(chuàng)業(yè)，年輕的時(shí)候去跟非常優(yōu)秀的人合作和學(xué)習(xí)，有這樣的經(jīng)驗(yàn)將來也會(huì)少走很多彎路，如果完全靠創(chuàng)業(yè)磨練自己，時(shí)間會(huì)比較長(zhǎng)。
三、創(chuàng)業(yè)嚴(yán)格來講沒有什么失敗，其實(shí)都是一份工作，失敗其實(shí)得到一個(gè)不一樣的經(jīng)驗(yàn)，不要把失敗當(dāng)作一個(gè)很大的負(fù)擔(dān)。
孫學(xué)京說我們不能預(yù)測(cè)未來。但是至少目前來說創(chuàng)業(yè)對(duì)他而言還是一種非常享受的心態(tài)。雖然辛苦，每天都在經(jīng)歷比較困難的時(shí)候，每天都在想著找錢找人，但是他在做自己喜歡的事情。
年紀(jì)大的人和年輕的人創(chuàng)業(yè)的差別，也許就是劇情沒有那么跌宕起伏，他們用平常心去做這件事。孫學(xué)京說創(chuàng)業(yè)是一份新的工作，也是他特別熱愛的工作。
