對于交互式空間音頻和由聲音主導的增強現(xiàn)實,BBC Research and Development(BBC R&D)的興趣正變得日漸濃厚。他們認為,有趣的下一步是將現(xiàn)有的地理定位音頻實驗移植到Bose Frames devkit:Alluvial Sharawadji。日前,剛剛成為BBC R&D軟件工程師的Jakub Fiala描述了這個端口,以及他從中學習到的經驗教訓。
Alluvial Sharawadji是一個為2018年夏天Eufónic Festival制作的“眾包聲音漫步(Soundwalk;一種主要目的是專注于聆聽環(huán)境的漫步)”。為此,Jakub Fiala及同時開發(fā)了一個適用于移動設備的網絡應用程序,其允許用戶錄制聲音,而后者將與當前的地理定位一起保存。然后,BBC團隊利用谷歌街景和Web Audio API在城鎮(zhèn)周圍呈現(xiàn)“虛擬聲音漫步”。
Sharawadji聲音漫步表示為遠程存儲的聲音文件,包含相關的緯度和經度坐標。當聲音漫步開始時,系統(tǒng)下載坐標映射和聲音文件。
對于這種聲景重建,BBC采用了iPhone的GPS在定位用戶周圍的聲音,并根據(jù)其與用戶的距離計算每種聲音的音量。接下來,研究團隊通過Resonance Audio(Google VR)庫在實時渲染聲音,從而提供了動態(tài)的聲景,可以根據(jù)用戶在現(xiàn)實世界中的位置進行變化。
對于BBC測試的第一個聲音漫步,它是由團隊各位成員用手機在倫敦White City辦公室錄制的聲音組成。這主要是相對安靜的環(huán)境錄音,同時包含大量的車水馬龍聲和施工噪音。這時,研究人員利用了Resonance Audio庫中的“rolloff”機制:隨著聽者的距離變遠而逐漸降低音量。
BBC發(fā)現(xiàn)環(huán)境聲音往往會被現(xiàn)實世界的聲音所淹沒,因此無法提供足夠的沉浸感。另外,Resonance Audio中的內置rolloff機制似乎不適合團隊使用的坐標系統(tǒng),因為步行一度的縱向距離意味著在倫敦步行約51英里。由于坐標值的微妙變化,用戶根本無法知覺rolloff效果。
對于第二次測試,Jakub Fiala等人沿著Wood Lane(在white city附近)以大約150米的間隔“放置”了三首音樂。他們同時將基于Inverse Square Law的音量衰減函數(shù)移植到演示內容之中,并且關閉了Resonance Audio的rolloff效果。Jakub Fiala等人發(fā)現(xiàn),自定義衰減的效果非常出色,可帶來優(yōu)秀的聲音定位。距聲音位置約5-10米處,他們可以聽到微弱的音樂線索。他們沿著聲音傳來的方向前進,并走到了音量最大的位置。
Jakub Fiala表示:“我們對音頻增強現(xiàn)實技術的可能性感到非常興奮,我們渴望用它來進行更多的實驗。根據(jù)我們迄今為止的測試,通過合適的聲音材料,以及何時的聲音放置和衰減調整,它有望成為新型位置聲音體驗的有趣平臺。”
原文鏈接:https://yivian.com/news/60780.html
來源:映維網