谷歌正在使為虛擬現實製作3d音訊變得更容易
谷歌宣佈推出一款名為共振音訊（resonanceaudio）的沉浸式音訊軟體開發工具包。共振音訊是一種在360度影片、VR和AR中為高保真3D聲音帶來可擴充套件效能的工具，可在移動和桌面上使用，並相容多種平臺，從Unity等遊戲引擎到web。它甚至可以作為一個獨立的VST外掛，這意味著它可以在多個音訊建立程式中使用。
在過去，在虛擬現實中提供高質量的3D音訊一直是一個挑戰，因為音訊是互動式的-基於物件的運動和使用者的運動而變化。這對硬體來說是一個負擔，需要大量的實時渲染，但谷歌表示，共振音訊足夠輕，即使在**上也可以透過虛擬現實提供高保真的3D音訊。
當人們沉浸在虛擬世界中時，3D音訊是一個重要的可信因素。想一想，即使是在你的街區散步，也會有數百種聲音給你一種空間感：一隻鳥在你頭頂上唧唧喳喳地叫著，一輛汽車駛近，從你身邊疾馳而過，然後在遠處拖著走，當你踩到一根樹枝時，從下麵傳來的裂縫，當風吹動樹葉時，樹葉在你腿上沙沙作響。如果所有這些噪音都是從左右耳水平向你襲來，那就太奇怪了，不是嗎？這就是3D音訊解決的問題。
為了做到這一點，谷歌的共振音訊使用了一種稱為環境聲學的全球環繞聲技術，並結合了與頭部相關的傳遞函式（HTRFs），這是一種將傳入的聲音對映到頭部的濾波器。它們一起欺騙你的大腦給聲音分配位置和距離，即使戴著耳機之類的東西，耳機只有兩個方向的音訊輸出。它透過複製我們大腦在現實生活中感知和放置聲音的方法來做到這一點：聲音到達左右耳所需的時間差，我們耳朵之間的音量差，以及我們耳朵之間聲音訊率的變化。所有這些左右耳聽到聲音的差異，讓我們在現實生活中能夠判斷距離、高度以及聲音的來源。
共振音訊使用“高度最佳化的數字訊號處理演算法”基於環境聲學，將允許數百個聲音空間化，一次，而不損害質量。它用來實現這一點的一些技巧是在接近物體時自動渲染近場效果，並且在統一的情況下，預渲染與物體材料（例如大理石柱或木屋內部）聲學特性相匹配的CPU重混響。
谷歌表示，共振音訊也比傳統的3D空間化功能更強大，因為它不僅可以控制聲音來自何處，還可以控制聲音如何從原點傳播出去。在下麵的例子中，共振音訊是調整吉他的聲音方向，聲音發出的形狀，以及聲音傳播的寬度。這意味著如果吉他是彈的，如果你站在它前面或後面，如果你面對它或轉過身去，它的聲音應該是不同的。
如果共振音訊被證明是處理器友好，因為它聲稱是，這可能意味著更廣泛地採用三維音訊去隨著不斷增長的虛擬現實和360度體驗庫。至少，從Android到iOS再到Linux，它可以在每一個平臺上使用，這意味著它對遊戲開發者、音訊工程師、音樂家等都是一個很有吸引力的選擇。如果你對自己的共振音訊感興趣，可以在谷歌的開發者網站上找到。
- 發表於 2021-06-22 03:30
- 閱讀 ( 38 )
- 分類：網際網路
你可能感興趣的文章
insta360 evo是一款小巧的可摺疊3d和vr相機
對於任何希望為虛擬現實建立內容的人來說，Insta360 EVO的出現使這一過程變得更加簡單。但這不僅僅是為了方便使用，因為EVO相機還可以透過360度全方位拍攝或令人驚歎的180度3D來捕捉美麗的鏡頭和影象。 ...
2018年vr有多好？值得買嗎？
...是一個引人注目的玩具。 其他公司也在做類似的事情。谷歌的“白日夢”虛擬現實平臺內置於許多Android**中，現在支援獨立耳機。聯想**了一款獨立的“幻影獨奏”虛擬現實耳機，售價400美元。與Oculus Go相比，這是一個很高的...
如何將智慧手機的虛擬現實體驗投射到電視上
...前，我們先來談談相容性。我在三星Gear VR和Galaxy S7 Edge、谷歌紙板和Nexus 5、谷歌紙板和iPhone 5S以及谷歌白日夢和Pixel XL上測試了這種方法。它在Android和iOS上都能完美地與紙板和白日夢一起工作，但是Gear-VR受到了影響，有些東西...
索尼vs facebook：為你的現實而戰才剛剛開始
...：你可以坐在任何地方 也許這就是為什麼Oculus和索尼正在重新設定預期。Oculus現在稱VR為“坐姿體驗”，GDC的大部分VR演示都適合這個主題：馴服遊戲，讓你坐在那裡，在固定的3D空間上移動頭部，而不是探索虛擬世界。雖然...
leap motion希望成為虛擬現實耳機進入現實世界的視窗
...加。開發人員已經開發了200多個遊戲和應用程式體驗，從谷歌地球（googleearth）上的漂浮游戲到像你用手一樣操縱物體的遊戲。 但幾乎沒有人認為，主要產品並沒有引起全世界的關註。它只出現在惠普生產的十幾臺機器上，...
一個kickstarter專案希望為團隊製作身臨其境的虛擬現實
一個最近資助的Kickstarter專案想要創造一種可以將虛擬現實投射到整個房間的技術。這個名為“沉浸”的專案計劃讓一組人可以同時體驗虛擬現實，而不用在臉上戴任何東西。 該專案背後的公司Catopsys稱Immeris是...
谷歌的works with Carboard計劃承諾為每個人提供“很棒的虛擬現實”
如今，谷歌對虛擬現實和自己的紙板平臺越來越重視。在一篇博文中，該公司宣佈推出“與谷歌紙板一起工作”的認證計劃。它旨在保證越來越多的廉價虛擬現實耳機（模仿谷歌自己的）與谷歌Play中的虛擬現實應用程式之間的...
googlejump是一個虛擬現實電影製作的完整生態系統
在谷歌I/O開發者大會的開幕主題演講接近尾聲時，該公司宣佈了一個名為“跳躍”的東西。雖然聽起來跳躍只是該公司與GoPro聯合打造的一個攝像裝置，但它遠不止這些。Jump是一個用於建立虛擬現實影片的完整生態系統，它聽起...
這家初創公司正在彌合當今網路和未來虛擬現實之間的鴻溝
...列印，”Denoyel說在過去的一年裡，隨著Facebook收購Oculus，谷歌投資Magic Leap，然後是微軟的HoloLens，我們意識到我們有這個巨大的機會。” 科技界的每個大品牌都有一匹馬參加這場比賽 上週，蘋果公司表示，將加入該黨收...
我們最喜歡的虛擬現實電影製作人在聖丹斯解釋如何使偉大的虛擬現實
...試圖把講故事和在場協調起來。所以對我們來說這是一個正在進行的研究。這並不是說在過去的兩年裡我們已經搞清楚了，但這絕對是我們試圖探索、發現、培養的東西。我認為這是我們作為VR說書人的核心職責。 保羅·拉...
