本項目旨在通過動態(tài)追蹤技術(shù)實(shí)現(xiàn)兩大創(chuàng)新：

1. 空間音頻實(shí)時混音：對移動表演者進(jìn)行精準(zhǔn)定位，實(shí)現(xiàn)三維聲場動態(tài)重構(gòu)。 

2. 智能燈光追蹤系統(tǒng)：基于演員位置數(shù)據(jù)實(shí)現(xiàn)自動化燈光調(diào)控。

該技術(shù)方案可廣泛應(yīng)用于VR音樂會、體育賽事直播、劇場演出等場景，同時支持杜比全景聲、雙耳渲染及高階Ambisonic格式的電視節(jié)目與播客制作。該項目對于 VR 現(xiàn)場音樂、體育及戲劇應(yīng)用具有重要意義。

Naostage K SYSTEM無信標(biāo)追蹤系統(tǒng)

● 基于純視覺的識別技術(shù)

● 無需任何物理信標(biāo)或可穿戴設(shè)備

● 支持多目標(biāo)動態(tài)追蹤

該項目邀請了藝術(shù)家 June Caravel 與 Gwendolyne Coronado進(jìn)行表演，其位置信息被傳輸至沉浸聲服務(wù)器進(jìn)行實(shí)時空間化處理，并同步至燈光系統(tǒng)實(shí)現(xiàn)自動追蹤。

主要流程如下：

1. 系統(tǒng)設(shè)置階段

● 在工作室內(nèi)部署Naostage K SYSTEM，設(shè)備安裝高度為 3.50 米，距離源的最小距離為 3 米；

● 通過 OSC 協(xié)議將空間坐標(biāo)數(shù)據(jù)傳輸至沉浸聲服務(wù)器；

● 同步進(jìn)行VR 360攝像機(jī)進(jìn)行捕捉與Ambisonic音頻采集。

2. 制作與錄制階段

● Kariba Productions團(tuán)隊使用12K VR攝像機(jī)完成“Ma star à moi”作品的拍攝；

● Virtuel Audio的錄音師Eric Munch負(fù)責(zé)音頻錄制。

3. 系統(tǒng)集成驗證

項目結(jié)果正如預(yù)期——實(shí)時追蹤系統(tǒng)非常高效、音頻與燈光系統(tǒng)無縫集成。藝術(shù)家的追蹤數(shù)據(jù)使實(shí)時音頻空間化成為可能，無需使用信標(biāo)，從安裝到最終呈現(xiàn)沒有任何障礙。此外，Naostage 支持OSC協(xié)議，與沉浸聲服務(wù)器完美協(xié)同工作，從而確保聲音與燈光系統(tǒng)呈現(xiàn)最佳效果。