我們可能仍然認(rèn)為AR是一種視覺(jué)媒介，但蘋(píng)果再次對(duì)整個(gè)體驗(yàn)的音頻方面進(jìn)行了研究。繼之前研究讓音頻發(fā)出3D聲音之后，現(xiàn)在又一直在研究更便捷的方式來(lái)實(shí)現(xiàn)這一目標(biāo)。"具有音頻和測(cè)距組件的音頻系統(tǒng) "是一項(xiàng)新獲批的專利，該專利關(guān)注的是如何用最少的設(shè)備模擬出準(zhǔn)確的3D聲音。
蘋(píng)果在專利描述當(dāng)中表示，在現(xiàn)有的向虛擬空間中觀察者重現(xiàn)聲音圖像方法中，分布在實(shí)際空間周圍的麥克風(fēng)必須相互間隔，才能依靠檢測(cè)到的聲音進(jìn)行聲源定位。相應(yīng)地，這種方法無(wú)法使用單一、緊湊的麥克風(fēng)陣列來(lái)進(jìn)行聲源定位，而且這種方法的設(shè)備和安裝成本會(huì)很高。
還有一個(gè)問(wèn)題是，一旦在周圍間隔了一整系列的麥克風(fēng)進(jìn)行錄音，移動(dòng)它們就會(huì)很費(fèi)時(shí)。蘋(píng)果想要的是一個(gè)更簡(jiǎn)單的系統(tǒng)，同時(shí)也適用于便攜式錄音和播放。這對(duì)于蘋(píng)果AR來(lái)說(shuō)尤為重要，因?yàn)橐纛l是讓體驗(yàn)感覺(jué)真實(shí)的關(guān)鍵。虛擬現(xiàn)實(shí)和增強(qiáng)現(xiàn)實(shí)環(huán)境可以包括虛擬聲源，即在虛擬空間中的計(jì)算機(jī)生成的聲源。
蘋(píng)果表示，虛擬空間可以映射到實(shí)際空間，例如，用戶可以在一個(gè)房間里戴上耳機(jī)，耳機(jī)可以向用戶重現(xiàn)一個(gè)聲音，好像這個(gè)聲音是用戶面前說(shuō)話的同事聲音，即使這個(gè)同事實(shí)際上是在另一個(gè)房間里。為了直觀地顯示虛擬物體的移動(dòng)或重新定位，錄音必須能夠準(zhǔn)確地識(shí)別源位置。當(dāng)位置被識(shí)別后，錄音可以以一種定位的方式向用戶重現(xiàn)重現(xiàn)的聲音，就像聲音來(lái)自用戶占據(jù)的房間中的類似位置一樣。
這項(xiàng)專利提出，這些麥克風(fēng)要輔以蘋(píng)果所說(shuō)的 "深度捕捉裝置"。當(dāng)這兩者能夠檢測(cè)到一個(gè)點(diǎn)云和一個(gè)局部聲場(chǎng)，而處理器能夠從它們的數(shù)據(jù)中重建一個(gè)全局聲場(chǎng)時(shí)，就可以向用戶呈現(xiàn)一個(gè)虛擬現(xiàn)實(shí)環(huán)境。換句話說(shuō)，無(wú)論用什么系統(tǒng)來(lái)計(jì)算出虛擬同事在你左邊五英尺的地方，蘋(píng)果AR音頻都可以播放他們的語(yǔ)音，就好像離你那么近，而且是在那個(gè)方向。關(guān)鍵就在于這個(gè)深度捕捉設(shè)備。該專利不厭其煩地描述了每一種可能的這種設(shè)備，但它集中在相機(jī)上。
蘋(píng)果表示，一個(gè)攝像頭陣列可以是一個(gè)具有兩個(gè)或多個(gè)攝像頭的立體系統(tǒng)，幾個(gè)攝像頭可以彼此相鄰和/或彼此間隔開(kāi)，并觀察同一個(gè)空間。每個(gè)攝像頭可以從不同的有利位置檢測(cè)同一空間，因此，通過(guò)分析來(lái)自每個(gè)攝像機(jī)的圖像，可以確定距離攝像頭陣列106個(gè)不同點(diǎn)和/或圖像內(nèi)物體的距離。當(dāng)產(chǎn)生聲音的物體在視野內(nèi)向后移動(dòng)時(shí)，例如，遠(yuǎn)離捕捉設(shè)備的位置，系統(tǒng)就可以調(diào)整音頻信號(hào)的延遲和增益，以呈現(xiàn)與虛擬聲音在虛擬環(huán)境中和用戶相對(duì)的位置。
來(lái)源：cnBeta
