VR次元 孟倩 3月8日報道
當人們沉浸在VR視覺(jué)的震撼效果中時(shí),很多人似乎都忽略了VR的聲音。在VR內容中沉浸感不僅產(chǎn)生于視覺(jué)部分,還來(lái)源于聽(tīng)覺(jué)部分。在騰訊科技與時(shí)代拓靈創(chuàng )始人孫學(xué)京博士的對話(huà)中,孫博士告訴記者,有效利用全景聲的VR內容,音頻可以占到沉浸感體驗的50%。簡(jiǎn)而言之,聲音在VR里尤為重要。
VR內容產(chǎn)業(yè)鏈最上游是擁有原始版權的IP方,最下游是頭盔等可顯示內容的頭顯,這中間內容如何產(chǎn)生。正是孫學(xué)京博士與其團隊正在研究的事情。內容為王的時(shí)代,時(shí)代拓靈以?xún)热轂槁淠_點(diǎn)切入到VR這個(gè)領(lǐng)域,旨在用技術(shù)解決VR內容匱乏的問(wèn)題。這不僅基于其多年以來(lái)的技術(shù)優(yōu)勢,還來(lái)源于創(chuàng )始團隊70后成員的文藝情懷。
時(shí)代拓靈的英文名字為T(mén)wirling in Time,是一首來(lái)自凱文.科恩的鋼琴曲,意為時(shí)光流轉,記錄聲音和過(guò)去珍貴的回憶。時(shí)代拓靈致力于VR音視頻的制作,同時(shí)對全景視頻和音頻發(fā)力,尤其是在VR 音頻方面填補了國內的空白。
留美博士放棄高薪工作 熱愛(ài)音樂(lè )用聲音改造VR
轉播到騰訊微博

孫學(xué)京清楚的記得公司注冊日期為2015年5月22日,而他辭職的日期為2015年6月1日。孫博士說(shuō),把自己技術(shù)方面的經(jīng)驗用到更大的平臺上,這是一直以來(lái)的想法,創(chuàng )業(yè)是需要基因的。
孫學(xué)京北大本科以后直讀美國西北大學(xué)博士,畢業(yè)后在美國科技企業(yè)從事聲音處理前沿算法研究多年,擁有了 90 多篇學(xué)術(shù)論文和專(zhuān)利技術(shù),期間擔任過(guò)杜比實(shí)驗室 Dolby Voice 項目的主要負責人,最大藍牙芯片廠(chǎng)商 CSR 音頻 CVC 套件核心開(kāi)發(fā)人員。
這樣一位擁有豐富技術(shù)經(jīng)驗的博士放棄掉自己高薪穩定的工作,開(kāi)始他真正的創(chuàng )業(yè)人生。
故事還得從那年北大圖書(shū)館前的草坪談起,那時(shí)這是北大學(xué)子的圣地,大家聚在一起彈彈吉他,玩搖滾音樂(lè ),釋放文藝情懷。孫學(xué)京回憶起,那個(gè)年代是中國搖滾非常繁榮的一段時(shí)期,像鄭鈞,高曉松,唐朝,黑豹都是那時(shí)火起來(lái)的。作為活躍的音樂(lè )愛(ài)好者,他曾經(jīng)為了舉辦一場(chǎng)搖滾音樂(lè )節注冊一個(gè)社團,最后卻因種種原因未能成行。
這種情懷,也就駐扎在孫學(xué)京的心里。海外工作13年,每逢春節回到家中,孫學(xué)京就會(huì )和家人拿起自己擅長(cháng)的樂(lè )器,合奏一曲。他利用自己的技術(shù)經(jīng)驗往往將這種珍貴的聲音錄成環(huán)繞聲。
在之前的工作中,孫學(xué)京也嘗試過(guò)進(jìn)行VR項目的內部孵化。這一次他拉上了和他相熟已久的原麥田(微博)守望者樂(lè )隊主創(chuàng )劉恩;趯σ魳(lè )的熱愛(ài)和文藝的情懷,他們一拍即合,做和聲音相關(guān)的VR,順理成章,更是興趣使然。
團隊的三位創(chuàng )始人分別有自己擅長(cháng)的方面,孫學(xué)京擁有豐富的技術(shù)經(jīng)驗,劉恩作為娛樂(lè )圈的一員,主要做市場(chǎng)部分,另一位創(chuàng )始人張旭,則偏向運營(yíng)方面。這三人的組合令團隊迅速運轉起來(lái),從去年5月至今,技術(shù)方面的研發(fā)和藝術(shù)方面的合作如火如荼的開(kāi)展起來(lái)。
孫學(xué)京說(shuō),像我們這種年齡比較大的人創(chuàng )業(yè),就是要嘗試想要做的事情。Follow your heart。
VR除了視覺(jué)還有聽(tīng)覺(jué) 音頻可達沉浸感體驗的50%
轉播到騰訊微博

孫學(xué)京說(shuō)當時(shí)劉恩和我們在想音樂(lè )能搞點(diǎn)什么,音頻是大家關(guān)注比較少的一點(diǎn),但是在VR里音頻的重要性得到了極大的提升。像美國做音視頻質(zhì)量較高的公司,音頻可以占到沉浸感體驗的50%。
虛擬現實(shí)里,尤其是全景,如果沒(méi)有聲音,沉浸感就會(huì )下降。既然虛擬現實(shí),那么就要模擬現實(shí)的百分之百,聲音也是非常重要的一部分。
目前孫學(xué)京和他的團隊致力于全景聲和全景視頻,主要發(fā)力在全景音視頻的制作上。 時(shí)代拓靈目前擁有自主開(kāi)發(fā)的視頻拼接技術(shù)、一個(gè)可以實(shí)時(shí)捕獲三維環(huán)境聲音的 360 聲場(chǎng)一體錄制機,還將推出面向全球的支持批量生產(chǎn)全景音視頻內容的云服務(wù)。
當然孫學(xué)京和他的團隊最為突出的還是在音頻方面,VR聲音制作一般分為兩步,一是用聲場(chǎng)錄制機現場(chǎng)錄立體聲,類(lèi)似于同期聲。他的團隊研發(fā)的360 聲場(chǎng)一體錄制機適用于VR,對聲場(chǎng)進(jìn)行操控,突破了地點(diǎn)的限制,同時(shí)還便于攜帶,這屬于內容的入口。
二是做后期處理,把很多軌音拿過(guò)來(lái),按照意圖方位遠近然后用景聲渲染引擎加工。每個(gè)聲音在任何一個(gè)時(shí)刻,在三維空間里的位置,是需要精確的。用三維就是要描述一個(gè)對象在空間里的軌跡,有數據就可以用算法渲染出來(lái)。在VR里面還需要得到陀螺儀和頭盔,人的頭部運動(dòng)的信息,把這些角度的信息也給渲染工具,根據信息來(lái)調整物體的所有位置。
目前一個(gè)難點(diǎn)在于VR聲音的修改,VR的音頻還沒(méi)有完全的標準化。如何與藝術(shù)家合作,怎么讓這個(gè)道路更順暢,要定義一個(gè)流程。孫學(xué)京說(shuō),我們是早期的,就得吃這個(gè)苦,得去摸索一個(gè)路。他表示團隊中有自己的算法工程師,同時(shí)也有第一批混音師,可以在文件里面改參數,不斷打磨流程。追求高品質(zhì)內容是孫學(xué)京團隊的目標,但是這將通過(guò)與內容方合作來(lái)實(shí)現。
有錄制這一端,也有播放這一端。他們要做的接下來(lái)就是一個(gè)軟件,其實(shí)就是播放器,F在這個(gè)階段還沒(méi)有一個(gè)標準,VR聲音只能用SDK打包到播放器內播出。并且這種架構不會(huì )卡不會(huì )頓,優(yōu)勢很大。把SDK規;,只要符合的格式,都可以用他們團隊的渲染引擎去做,最終可發(fā)展為深度定制優(yōu)化。這是一個(gè)潛在的贏(yíng)利點(diǎn),同時(shí)這是孫學(xué)京和他的團隊今后要探索的路。
除此之外孫學(xué)京和他的團隊還掌握了自主開(kāi)發(fā)的視頻拼接技術(shù),可進(jìn)行全景視頻的制作。他透露他們一整套內容方面的服務(wù)已和多家內容制作方在合作中,時(shí)代拓靈要爭取在一個(gè)月內正式上線(xiàn)商用。
VR將成為生活的一部分 市場(chǎng)會(huì )驗證VR的未來(lái)
轉播到騰訊微博

VR今年很火,但其實(shí)在消費者群體里并沒(méi)有那么普及。時(shí)代拓靈做了VR里更細致的一部分——音頻。從音頻切入,在國內還是比較少見(jiàn),而國外其實(shí)已經(jīng)有非常多精致的作品運用了全景聲音,國內大部分還是立體聲,這是非常脫節的。
孫學(xué)京說(shuō)目前他們的團隊領(lǐng)先其他團隊一段時(shí)間,希望未來(lái)可以保持技術(shù)上的優(yōu)勢,F在的發(fā)展情況完全證明了他們當初成立公司的一個(gè)預見(jiàn),VR聲音在中國屬于稀缺品。他談到在美國現在普通老百姓對VR的認知程度比較高了,長(cháng)遠來(lái)說(shuō)中國的市場(chǎng)其實(shí)足夠大。
VR聲音這是一個(gè)具有前瞻性的東西,最早看全景音樂(lè )會(huì )就可以體會(huì )到一定是這樣的形式。孫學(xué)京回想起當初對VR聲音的判斷。VR可能一周消費一次,和傳統的東西并存,并且會(huì )成為家居和生活的一部分。
VR實(shí)際上帶來(lái)了一個(gè)新奇的體驗,并且適用面非常廣,不同的人有不同的需求,目前的火爆是有一定原因的。孫學(xué)京表示市場(chǎng)是對的,現在有很多人在看這個(gè)市場(chǎng),大方向就擺在這里。雖然目前體驗尚待提升,但是VR還是有自己的存在價(jià)值的。而他們看好此方向,對未來(lái)的云服務(wù)的想象也是可見(jiàn)的,讓所有制作VR內容的人進(jìn)入這個(gè)領(lǐng)域門(mén)檻更低。目前面向TO B,而TO C 則可能做平臺做社區甚至移動(dòng)社交,這還是比較遙遠的事情。
投身到VR這樣一個(gè)新的平臺上,孫學(xué)京說(shuō),70后創(chuàng )業(yè)和年輕人會(huì )差很多,我們會(huì )比較穩定,心理上更成熟一些,但是在創(chuàng )業(yè)上我們還是新手。目前公司的發(fā)展速度已經(jīng)基本達到預期,而今后孫學(xué)京說(shuō)要在技術(shù)上保持領(lǐng)先性,還要積極在VR音視頻標準上參與,成為領(lǐng)導者。成為一個(gè)主要的服務(wù)提供者,這是他們的長(cháng)期目標。
最后,作為一名70后創(chuàng )業(yè)者,孫學(xué)京對創(chuàng )業(yè)給了一些懇切的意見(jiàn):
一、年輕人創(chuàng )業(yè)是非常好的一件事,現在整體環(huán)境非常有利于年輕人創(chuàng )業(yè)。他奉勸年輕人不要盲目,不要為了創(chuàng )業(yè)而創(chuàng )業(yè)。要衡量好自己是個(gè)什么樣的人,要做的事是不是自己想做的事。
二、同時(shí)如果不創(chuàng )業(yè),年輕的時(shí)候去跟非常優(yōu)秀的人合作和學(xué)習,有這樣的經(jīng)驗將來(lái)也會(huì )少走很多彎路,如果完全靠創(chuàng )業(yè)磨練自己,時(shí)間會(huì )比較長(cháng)。
三、創(chuàng )業(yè)嚴格來(lái)講沒(méi)有什么失敗,其實(shí)都是一份工作,失敗其實(shí)得到一個(gè)不一樣的經(jīng)驗,不要把失敗當作一個(gè)很大的負擔。
孫學(xué)京說(shuō)我們不能預測未來(lái)。但是至少目前來(lái)說(shuō)創(chuàng )業(yè)對他而言還是一種非常享受的心態(tài)。雖然辛苦,每天都在經(jīng)歷比較困難的時(shí)候,每天都在想著(zhù)找錢(qián)找人,但是他在做自己喜歡的事情。
年紀大的人和年輕的人創(chuàng )業(yè)的差別,也許就是劇情沒(méi)有那么跌宕起伏,他們用平常心去做這件事。孫學(xué)京說(shuō)創(chuàng )業(yè)是一份新的工作,也是他特別熱愛(ài)的工作。