本項(xiàng)目旨在通過(guò)動(dòng)態(tài)追蹤技術(shù)實(shí)現(xiàn)兩大創(chuàng)新：

1. 空間音頻實(shí)時(shí)混音：對(duì)移動(dòng)表演者進(jìn)行精準(zhǔn)定位，實(shí)現(xiàn)三維聲場(chǎng)動(dòng)態(tài)重構(gòu)。 

2. 智能燈光追蹤系統(tǒng)：基于演員位置數(shù)據(jù)實(shí)現(xiàn)自動(dòng)化燈光調(diào)控。

該技術(shù)方案可廣泛應(yīng)用于VR音樂(lè)會(huì)、體育賽事直播、劇場(chǎng)演出等場(chǎng)景，同時(shí)支持杜比全景聲、雙耳渲染及高階Ambisonic格式的電視節(jié)目與播客制作。該項(xiàng)目對(duì)于 VR 現(xiàn)場(chǎng)音樂(lè)、體育及戲劇應(yīng)用具有重要意義。

Naostage K SYSTEM無(wú)信標(biāo)追蹤系統(tǒng)

● 基于純視覺(jué)的識(shí)別技術(shù)

● 無(wú)需任何物理信標(biāo)或可穿戴設(shè)備

● 支持多目標(biāo)動(dòng)態(tài)追蹤

該項(xiàng)目邀請(qǐng)了藝術(shù)家 June Caravel 與 Gwendolyne Coronado進(jìn)行表演，其位置信息被傳輸至沉浸聲服務(wù)器進(jìn)行實(shí)時(shí)空間化處理，并同步至燈光系統(tǒng)實(shí)現(xiàn)自動(dòng)追蹤。

主要流程如下：

1. 系統(tǒng)設(shè)置階段

● 在工作室內(nèi)部署Naostage K SYSTEM，設(shè)備安裝高度為 3.50 米，距離源的最小距離為 3 米；

● 通過(guò) OSC 協(xié)議將空間坐標(biāo)數(shù)據(jù)傳輸至沉浸聲服務(wù)器；

● 同步進(jìn)行VR 360攝像機(jī)進(jìn)行捕捉與Ambisonic音頻采集。

2. 制作與錄制階段

● Kariba Productions團(tuán)隊(duì)使用12K VR攝像機(jī)完成“Ma star à moi”作品的拍攝；

● Virtuel Audio的錄音師Eric Munch負(fù)責(zé)音頻錄制。

3. 系統(tǒng)集成驗(yàn)證

項(xiàng)目結(jié)果正如預(yù)期——實(shí)時(shí)追蹤系統(tǒng)非常高效、音頻與燈光系統(tǒng)無(wú)縫集成。藝術(shù)家的追蹤數(shù)據(jù)使實(shí)時(shí)音頻空間化成為可能，無(wú)需使用信標(biāo)，從安裝到最終呈現(xiàn)沒(méi)有任何障礙。此外，Naostage 支持OSC協(xié)議，與沉浸聲服務(wù)器完美協(xié)同工作，從而確保聲音與燈光系統(tǒng)呈現(xiàn)最佳效果。