汕大老師做VR播放器 立體聲音頻一鍵錄入 實時“渲染”為動態(tài)聲場

◆聯(lián)合創(chuàng)始人張婷婷還是廣東時代美術館的策展人助手、藝術家助手。

文| 鉛筆道 記者 楊博宇

十年前，張婷婷還是一名實習生，在法國蓬皮杜藝術中心的聲學與音樂合作研究所做畢業(yè)論文。她在那里見識了科學家和藝術家的合作，意識到聲音和人之間不僅僅是“聽”的關系，更是一種雙向互動。

回國后，她在華南理工大學聲學研究所繼續(xù)碩士研究生學業(yè)，完成關于空間虛擬聲技術HRTF的畢業(yè)論文。之后，她從沒停止對音頻體驗和聲音交互的思考。

“難道我們就只有立體聲和環(huán)繞聲嗎？”在這兩者之外，張婷婷一直想嘗試“發(fā)出”不同的聲音。

去年6月，張婷婷、王杰、林云帆聯(lián)合創(chuàng)立創(chuàng)聲科技——一家專注于VR音頻技術及產(chǎn)品研發(fā)的創(chuàng)業(yè)公司，為音（視）頻制作者和企業(yè)提供VR動態(tài)聲場的解決方案和音頻產(chǎn)品。

目前，創(chuàng)聲科技研發(fā)的VR播放器及VR動態(tài)聲場解決方案已經(jīng)上線；動向耳機已完成原型開發(fā)，并計劃年內量產(chǎn)。

注:張婷婷承諾文中數(shù)據(jù)無誤，為其真實性負責，鉛筆道已備份錄音速記，為內容客觀性背書。

去年上半年，VR風口起來時，數(shù)娛科技CEO、錄音師林云帆找到張婷婷和廣州大學音頻技術專家王杰教授，提議三人一起從事VR音頻產(chǎn)品的開發(fā)。

在此之前，張婷婷曾就職華為從事基站物理層算法研究，之后作為合伙人參與得易電子科技有限公司的創(chuàng)業(yè)，負責專業(yè)音頻處理器研發(fā)。這兩段經(jīng)歷不僅為日后研發(fā)VR音頻產(chǎn)品作了準備，更讓張了解到一家現(xiàn)代企業(yè)是如何管理的。

2013年，她任教于汕頭大學長江藝術與設計學院交互設計專業(yè)，研究聲音觀念及裝置和交互機制。任教期間，常有影視和音頻行業(yè)的朋友向她詢問VR音頻的相關情況。

因此，當老朋友林云帆向她提議時，她很快便答應了。根據(jù)專業(yè)知識，她判斷這件事可行，并認為這是個推出全新體驗的音頻產(chǎn)品的好機會。

張婷婷、王杰和林云帆對業(yè)內已發(fā)布的產(chǎn)品進行調研，發(fā)現(xiàn)目前市場上的VR音頻產(chǎn)品集中在制作端，如全景錄音麥克風等，但制作出來的音頻內容在雙聲道重放時仍然是普通的立體聲或雙耳信號，并沒有動態(tài)效果?！熬拖袷悄悴荒苡肰CD去播放DVD一樣?！?

去年6月，張婷婷、王杰和林云帆正式組建團隊，成立創(chuàng)聲科技。他們試圖從重放端入手，解決VR動態(tài)聲場的問題。

◆創(chuàng)聲科技項目團隊

為了在重放端讓聲音“動”起來，團隊開始了大量的實驗研究。他們根據(jù)已被學界承認的雙耳聽覺原理，結合快速實時卷積算法，研發(fā)了DSVA技術——可實時合成動態(tài)三維空間中任意方位的聲像，并圍繞此技術申請了5項發(fā)明專利。

基于此，今年年初，團隊開發(fā)出具備動態(tài)聲場重放功能的VR播放器。這款VR播放器根據(jù)手機的傳感器方位數(shù)據(jù)，將影片中的普通立體聲音頻或環(huán)繞聲音頻，實時“渲染”為動態(tài)聲場，讓用戶獲得與畫面一致的聲音方位感。這樣一來，內容制作方在音頻制作上，不需要為VR改變任何他們已經(jīng)熟悉的技術、流程和設備。

這款VR播放器可在安卓系統(tǒng)4.2及以上版本使用，暫時只接受定制，客戶主要是VR視頻制作者。目前，團隊已為數(shù)享文化提供VR內容制作的音頻服務。

此外，VR播放器的音頻處理模塊也可移植至其它各種平臺，“創(chuàng)聲科技也可通過技術授權來獲得收入”。

但在和某電視廠商合作過程中，張婷婷發(fā)現(xiàn)，研發(fā)層面的對接非常困難。對方企業(yè)管理嚴格又復雜，就算僅是開個接口，都需要向各個部門報批，進展緩慢、推進困難。

這次經(jīng)歷讓張婷婷下決心自己做硬件。基于耳機與用戶的聯(lián)系最為緊密，團隊推出了創(chuàng)聲動向耳機。

這款耳機內置運動傳感器檢測用戶頭部的運動，專業(yè)音頻處理芯片搭載DSVA技術，為用戶提供動態(tài)聲場。

目前動向耳機已完成原型機開發(fā)，并與深圳市三諾電子有限責任公司達成生產(chǎn)合作意向。產(chǎn)品預計今年年內發(fā)布，預計售價在600～1200元。此外，另一款智向聲匣產(chǎn)品也在設計之中。

談及未來規(guī)劃，張婷婷及其團隊希望通過人工智能和大數(shù)據(jù)優(yōu)化產(chǎn)品體驗，例如增加智能降噪、智能音量調節(jié)等功能，另外也希望把VR播放器搭建為VR音（視）頻的內容入口。

現(xiàn)階段，創(chuàng)聲科技正尋求300萬元天使輪融資，資金主要用于動向耳機生產(chǎn)和市場推廣。