facebook希望它的ar眼鏡能給佩戴者帶來超級聽覺
一項新的Facebook實驗顯示了聲音在增強現實中的重要作用。frlresearch（前Facebook Reality Labs）首席科學家邁克爾•阿布拉什（Michael Abrash）和他的團隊今天公佈了該團隊稱之為“感知超能力”（perceptive superpowers）的細節——AR系統，它能找出你想要聽到的聲音，然後放大並抑制背景噪音。與空間音訊功能相結合，該裝置建立了一個聽覺等效全息圖覆蓋在一副眼鏡。
Facebook多年來一直在追求高質量的虛擬聲音，主要是透過Oculus虛擬現實耳機。frlresearch的最新工作集中在AR應用上。舉一個例子，“想象一下，在擁擠的餐廳或酒吧裡進行一次談話，而不必提高嗓門讓別人聽到，也不必費勁去理解別人在說什麼，”該公司解釋道。
AR眼鏡可以做到這一點，透過麥克風拾取音訊，使用上下文線索來判斷哪些聲音是重要的，並透過一個消除噪音的聽筒來傳送這些聲音。相反，如果你在打電話或影片電話，改善的空間聲音可以將參與者的聲音或其他音訊投射到房間的特定部分，增加你真的和別人在一起的感覺——或者用FRL Research的話說，“音訊存在”。
正如Facebook所承認的，該實驗室的“感知超能力”音調與現有助聽器的功能非常相似，助聽器也能放大聲音，降低背景噪音。（一個實驗系統甚至使用大腦植入物來聚焦特定的聲音。）
然而，AR眼鏡為有聽力障礙和無聽力障礙的人提供了獨特的機會。方向感測器和外向或眼睛跟蹤相機可以收集詳細的上下文資訊，包括你的身體方向和你的目光集中在哪裡。這有助於耳機精確定位“聲聚光燈”進行放大。當然，AR系統可以將自己的音景與放大的音訊混合。
Facebook還可以用它的其他AR計劃來補充這個系統。例如，LiveMaps的目標是建立豐富的地圖，其中包含有關人們周圍環境的資訊。如果LiveMaps檢測到有人在餐廳戴著眼鏡，眼鏡可以做一些像自動標記和取消叮噹聲銀器。
Facebook釋出了一張假人頭上的入耳式監聽器原型照片，以及一張團隊成員戴著耳機的照片，這些耳機看起來更像Valve的離耳式揚聲器。Oculus Quest VR耳機使用定向揚聲器，這是一種方便的一刀切的解決方案，用於將聲音投射到環境中，但會將聲音洩漏給旁觀者，而在公共場合佩戴AR眼鏡時，入耳式監聽器可能更適合改變整體聲級。FRL研究音訊負責人Ravish Mehra說：“使用什麼形狀因子來解決問題最終取決於應用程式。”。
其他公司也嘗試了聽覺增強技術——最引人注目的是Bose，該公司在2018年推出了純音訊AR眼鏡。Bose的眼鏡使用空間感測器來檢測佩戴者的視線，並提供虛擬街頭遊覽等功能。不過，該公司未能使它們在商業上可行，並於今年6月放棄了該專案。
與前幾年不同的是，Facebook沒有在2020年舉辦會議展示實驗性技術，因此我們沒有親自聽到它的音訊。frlresearch向記者展示了它的遠端通話過濾系統。而任何空間音訊的改進都可能很快應用到虛擬現實耳機上，包括傳聞中的本月Facebook Connect大會前後的Oculus Quest更新。Mehra說：“我們正在做的工作和我們今天介紹的工作肯定對我們的VR裝置系列有應用。”。
這些能力的全面應用可能需要數年的時間。我們對Facebook的消費者AR眼鏡路線圖瞭解不多，即使我們正在慢慢了解該公司認為他們應該做些什麼。有幾張照片顯示的是塑膠鏡框，但它們的設計是用來固定麥克風陣列的，而不是作為正式的眼鏡。Facebook此前表示，它已經**了多個原型變體，包括最近的AR/VR組合耳機設計，看起來像一副太陽鏡。
為了銷售真正的商業產品，Facebook需要消除超出技術層面的擔憂。這包括讓人們相信“感性超能力”不會對隱私構成威脅。
在沒有任何限制的情況下，足夠強大的麥克風和過濾技術可以讓人們在公共空間中潛移默化地竊聽對話。人工智慧音訊分析提供了更奇怪、更令人擔憂的可能性，比如在擁擠的房間裡標記特定聲音或對話關鍵詞的能力。（從理論上講，它還可以執行更無害、更有用的任務，比如實時翻譯。）當然，眼鏡也可以記錄你自己的對話。
沒有跡象表明聯邦調查局的研究人員正在考慮蓄意監視。但許多人已經擔心——可能是錯誤的——Facebook的應用程式正在將它們記錄下來以投放目標廣告。因此，僅僅是這種可能性就可能引起消費者的警覺。frlresearch表示，捕獲的音訊目前被加密並存儲在伺服器上，少數研究人員可以訪問這些伺服器。
阿布拉什說，Facebook正試圖將隱私融入眼鏡設計的各個方面，這與它對AR/VR整體計劃的剋制相呼應。除此之外，該系統可以在放大對話之前請求他人眼鏡的許可，也可以範圍有限。他告訴記者：“與其把這當成一個神奇的手電筒，我們可以指著任何人，聽聽他們在說什麼，不如把它看成是人們無論如何都能參與他們的談話。”。
阿布拉什說，目前這種微型麥克風陣列的威力還不足以進行遠端間諜活動。“如果你看到有人戴著兩英尺寬的眼鏡走路，”他開玩笑地提醒說，“你應該多疑。”
- 發表於 2021-04-17 19:13
- 閱讀 ( 43 )
- 分類：網際網路
你可能感興趣的文章
當心谷歌chrome技術支援騙局
...援騙局。這一個使用了一個錯誤來超載你的瀏覽器，騙子希望你能給他們打電話尋求幫助。 ...
snap為snapchat癮君子推出眼鏡2.0
...的眼鏡，原名Snapchat，是一種可以拍攝影片的太陽鏡。Snap希望眼鏡能大受歡迎，但最終公司只賣出了15萬副。 ...
什麼是遊戲眼鏡？它們是如何工作的？
...唯一重要的光”，如果有點虎頭蛇尾的話，這個答案是有希望的。這種方法濾除了顯示器產生的“噪音”藍光，使其他顏色更具活力，類似於雪地護目鏡，幫助你看透反射光。如果奧克利有一個更復雜、更令人滿意的答案，我們...
每日新聞綜述：首都一號遭到駭客攻擊，曝光1.06億客戶
...：考慮到iPad的螢幕大小和你只能顯示的應用程式數量，它的主螢幕看起來很稀疏。最新的iPadOS 13提供了新的選項。您可以在螢幕上顯示20個較小的圖示或15個較大的圖示。選擇是好的。[邊緣] 微軟表示，原HoloLens將不會得到進一...
每日新聞綜述：通用windows平臺（uwp）的應用程式似乎在生命支援上
...來源當然是三星，他們還沒有說什麼是什麼。[安卓警察] Facebook正在開發語音控制產品：Portal只是一個開始。馬克·扎克伯格宣佈，公司正在開發幾種語音控制產品，不過他沒有透露任何細節。此外，該社交網路希望繞過谷歌和Al...
alphabet的登月實驗室正在研製一種能給人超人聽覺的裝置
...隊並不是只關注一個裝置或一個用例，Insider說。該團隊希望透過多種裝置和型號建立一個成功的企業，因此如果他們成功了，你可能會開始佩戴谷歌旗下的助聽器。
facebook展示瞭如何將其神經腕帶與ar眼鏡配合使用
Facebook提供了一個新的增強現實介面的計劃，該介面基於CTRL實驗室的技術，CTRL實驗室是Facebook在2019年收購的初創公司。在一段影片中，它展示了使用肌電圖（EMG）將微妙的神經訊號轉化為動作的腕帶——比如打字、刷卡，或者...
snapchat的眼鏡這次可能會變成真正的ar眼鏡——還有一架無人機
...的一部分。如果它想繼續推出AR眼鏡，似乎必須與蘋果和Facebook等公司的競爭相抗衡——這兩家公司似乎都在開發自己的臉戴式可穿戴裝置。 至於無人機，關於它的資訊很少。多年來一直有傳言稱Snap正在研發無人機，早在2017年...
三星設想，在這些洩露的概念影片中，它的第一款ar眼鏡會是什麼樣子
...然，蘋果正在開發智慧手錶和AR耳機，據報道，**AR眼鏡的Facebook硬體部門也在開發智慧手錶。 談到三星和智慧手錶，兩位已知的洩密者現在表示，三星可能會回到安卓系統開發下一款智慧手錶，而不是它自己的Tizen平臺，因為它...
高通公司的新ar“智慧檢視器”允許您將虛擬螢幕固定到牆上
...於XR1智慧瀏覽器的產品最終可能會與幾家主要公司競爭。Facebook去年宣佈即將進入AR硬體市場，並計劃在2021年晚些時候釋出一套具有有限AR功能的Ray-Ban智慧眼鏡。據傳蘋果還將生產一款高階AR/VR耳機，旨在構建開發者生態系統。 ...
