對于交互式空間音頻和由聲音主導(dǎo)的增強(qiáng)現(xiàn)實(shí),BBC Research and Development(BBC R&D)的興趣正變得日漸濃厚。他們認(rèn)為,有趣的下一步是將現(xiàn)有的地理定位音頻實(shí)驗(yàn)移植到Bose Frames devkit:Alluvial Sharawadji。日前,剛剛成為BBC R&D軟件工程師的Jakub Fiala描述了這個(gè)端口,以及他從中學(xué)習(xí)到的經(jīng)驗(yàn)教訓(xùn)。
Alluvial Sharawadji是一個(gè)為2018年夏天Eufónic Festival制作的“眾包聲音漫步(Soundwalk;一種主要目的是專注于聆聽環(huán)境的漫步)”。為此,Jakub Fiala及同時(shí)開發(fā)了一個(gè)適用于移動設(shè)備的網(wǎng)絡(luò)應(yīng)用程序,其允許用戶錄制聲音,而后者將與當(dāng)前的地理定位一起保存。然后,BBC團(tuán)隊(duì)利用谷歌街景和Web Audio API在城鎮(zhèn)周圍呈現(xiàn)“虛擬聲音漫步”。
Sharawadji聲音漫步表示為遠(yuǎn)程存儲的聲音文件,包含相關(guān)的緯度和經(jīng)度坐標(biāo)。當(dāng)聲音漫步開始時(shí),系統(tǒng)下載坐標(biāo)映射和聲音文件。
對于這種聲景重建,BBC采用了iPhone的GPS在定位用戶周圍的聲音,并根據(jù)其與用戶的距離計(jì)算每種聲音的音量。接下來,研究團(tuán)隊(duì)通過Resonance Audio(Google VR)庫在實(shí)時(shí)渲染聲音,從而提供了動態(tài)的聲景,可以根據(jù)用戶在現(xiàn)實(shí)世界中的位置進(jìn)行變化。
對于BBC測試的第一個(gè)聲音漫步,它是由團(tuán)隊(duì)各位成員用手機(jī)在倫敦White City辦公室錄制的聲音組成。這主要是相對安靜的環(huán)境錄音,同時(shí)包含大量的車水馬龍聲和施工噪音。這時(shí),研究人員利用了Resonance Audio庫中的“rolloff”機(jī)制:隨著聽者的距離變遠(yuǎn)而逐漸降低音量。
BBC發(fā)現(xiàn)環(huán)境聲音往往會被現(xiàn)實(shí)世界的聲音所淹沒,因此無法提供足夠的沉浸感。另外,Resonance Audio中的內(nèi)置rolloff機(jī)制似乎不適合團(tuán)隊(duì)使用的坐標(biāo)系統(tǒng),因?yàn)椴叫幸欢鹊目v向距離意味著在倫敦步行約51英里。由于坐標(biāo)值的微妙變化,用戶根本無法知覺rolloff效果。
對于第二次測試,Jakub Fiala等人沿著Wood Lane(在white city附近)以大約150米的間隔“放置”了三首音樂。他們同時(shí)將基于Inverse Square Law的音量衰減函數(shù)移植到演示內(nèi)容之中,并且關(guān)閉了Resonance Audio的rolloff效果。Jakub Fiala等人發(fā)現(xiàn),自定義衰減的效果非常出色,可帶來優(yōu)秀的聲音定位。距聲音位置約5-10米處,他們可以聽到微弱的音樂線索。他們沿著聲音傳來的方向前進(jìn),并走到了音量最大的位置。
Jakub Fiala表示:“我們對音頻增強(qiáng)現(xiàn)實(shí)技術(shù)的可能性感到非常興奮,我們渴望用它來進(jìn)行更多的實(shí)驗(yàn)。根據(jù)我們迄今為止的測試,通過合適的聲音材料,以及何時(shí)的聲音放置和衰減調(diào)整,它有望成為新型位置聲音體驗(yàn)的有趣平臺。”
原文鏈接:https://yivian.com/news/60780.html
來源:映維網(wǎng)