革命性的方法將3D聲音帶入起居室

計(jì)算機(jī)視覺(jué)和聲音專(zhuān)家展示了“Media Device Orchestration” - 一種創(chuàng)新的家庭音頻概念，通過(guò)使用典型起居室中的所有可用設(shè)備，用戶可以享受身臨其境的音頻體驗(yàn)。薩里大學(xué)的計(jì)算機(jī)視覺(jué)和聲音專(zhuān)家展示了“Media Device Orchestration” - 一種創(chuàng)新的家庭音頻概念，通過(guò)使用典型起居室中的所有可用設(shè)備，用戶可以享受身臨其境的音頻體驗(yàn)。

媒體設(shè)備編排(MDO)概念是在薩里與索爾福德大學(xué)和南安普敦大學(xué)以及BBC研究與開(kāi)發(fā)部合作開(kāi)發(fā)的。它將于2017年8月24日在倫敦的Audio Mostly會(huì)議上發(fā)布。

利用MDO概念，研究人員已經(jīng)證明，通過(guò)在客廳中使用日常家用設(shè)備，如筆記本電腦，智能手機(jī)或無(wú)線迷你音箱，可以實(shí)現(xiàn)3D或“空間音頻”體驗(yàn)。該技術(shù)通過(guò)隔離音頻內(nèi)容中的不同“對(duì)象”(例如特定語(yǔ)音)，并將它們連接到房間周?chē)捎玫膯为?dú)揚(yáng)聲器來(lái)工作。

這個(gè)概念可以使消費(fèi)者以更加身臨其境，多層次和令人興奮的方式欣賞電影，游戲，節(jié)目和音樂(lè)。

雖然可以使用當(dāng)前空間音頻技術(shù)創(chuàng)建3D收聽(tīng)體驗(yàn)，但這需要復(fù)雜的設(shè)置，其涉及位于與收聽(tīng)者相關(guān)的精確點(diǎn)的多個(gè)揚(yáng)聲器。由于這些限制，該技術(shù)在國(guó)內(nèi)情況下不易復(fù)制，并且通常僅限于諸如電影院和主題公園體驗(yàn)的專(zhuān)業(yè)環(huán)境。

MDO研究是由EPSRC(工程和物理科學(xué)研究委員會(huì))資助的耗資540萬(wàn)英鎊的五年期S3A項(xiàng)目的一部分，該項(xiàng)目旨在實(shí)現(xiàn)公眾消費(fèi)音質(zhì)的逐步改變。

由于多種原因，沉浸式空間音頻系統(tǒng)的發(fā)展近年來(lái)已成為音頻研究界和家庭音響產(chǎn)業(yè)的主要焦點(diǎn)。隨著3D電視等先進(jìn)家庭視頻技術(shù)的出現(xiàn)，音頻技術(shù)需要“趕上”才能與視覺(jué)體驗(yàn)相匹配。與此同時(shí)，視頻游戲和其他應(yīng)用程序虛擬現(xiàn)實(shí)的增長(zhǎng)正在創(chuàng)造對(duì)用戶周?chē)穆曇舾械男枨蟆?/p>

除了“基于頻道”的聲音制作(其中再現(xiàn)系統(tǒng)在廣播內(nèi)容之前被修復(fù))之外，隨著諸如杜比全景聲(Dolby Atmos)之類(lèi)的技術(shù)的推出，商業(yè)市場(chǎng)上出現(xiàn)了“基于對(duì)象的”音頻。基于對(duì)象的音頻技術(shù)使S3A研究人員能夠訪問(wèn)音頻場(chǎng)景的每個(gè)獨(dú)立部分，智能地路由它們以改善聽(tīng)眾體驗(yàn)。

作為S3A項(xiàng)目的領(lǐng)導(dǎo)者，薩里大學(xué)結(jié)合了計(jì)算機(jī)視覺(jué)和機(jī)器收聽(tīng)(在其視覺(jué)，語(yǔ)音和信號(hào)處理中心)和聲音感知(在其錄音研究所內(nèi))的專(zhuān)業(yè)知識(shí)，這使得以用戶為中心的解決方案成為可能。而不是純粹基于實(shí)驗(yàn)室的方法。

薩里機(jī)器試聽(tīng)高級(jí)講師菲利普杰克遜博士說(shuō)：“大多數(shù)傳播到我們家中的消費(fèi)者音頻采用雙聲道立體聲形式，使用的基本原理已有130多年的歷史。聲道音頻技術(shù)無(wú)助于改善公眾的聆聽(tīng)體驗(yàn)。我們的目標(biāo)是將空間音頻帶出實(shí)驗(yàn)室并進(jìn)入人們的家中，讓用戶在客廳中感受到行動(dòng)的核心“。

薩里音響研究所空間音頻研究員Jon Francombe博士評(píng)論說(shuō)：“新的空間音頻方法經(jīng)常要求消費(fèi)者購(gòu)買(mǎi)和安裝特定的系統(tǒng)。我們正試圖通過(guò)智能化方式向任何人提供身臨其境的聽(tīng)覺(jué)體驗(yàn)。為我們已經(jīng)提供的任何設(shè)備提供內(nèi)容。我們迄今為止對(duì)我們的演示提供的反饋非常好：MDO產(chǎn)生的聽(tīng)覺(jué)體驗(yàn)與普通環(huán)繞聲不同，但可以同樣(如果不是更多)身臨其境。“

現(xiàn)在，S3A團(tuán)隊(duì)正在進(jìn)一步開(kāi)發(fā)MDO概念，以便自動(dòng)化“標(biāo)記”聲音并將其與可用揚(yáng)聲器連接。

研究論文“沉浸式空間音頻再現(xiàn)媒體設(shè)備編排”由音樂(lè)與媒體部錄音研究所與電氣與電子工程系視覺(jué)，語(yǔ)音和信號(hào)處理中心共同出版。薩里大學(xué)與索爾福德大學(xué)和南安普敦大學(xué)以及BBC研發(fā)中心合作。