您現在的位置是:首頁 > 網路遊戲首頁網路遊戲
Quest開發者可以開始使用語音識別和空間定位功能
- 2022-01-08
簡介開發者現在可以將Meta的語音識別功能新增到Oculus Store和App Lab應用中,還可以試驗混合現實空間錨
空間錨是什麼
開發者現在可以將Meta的語音識別功能新增到Oculus Store和App Lab應用中,還可以試驗混合現實空間錨。
Voice SDK和Spatial Anchors都在Connect 2021釋出,現在作為Oculus SDK v35版本的一部分。
語音SDK由Wit提供動力。這是2015年Meta收購的語音介面公司。Wit是伺服器端,所以不能離線工作,有一些延遲。
Meta表示,這種新的API允許搜尋應用內部內容和“語音驅動的遊戲玩法”,如口頭魔法咒語或與虛擬角色的對話。雖然上個月釋出的Oculus SDK包括Voice SDK,
但它被標記為“實驗性的”,所以不能包含在Oculus Store或App Lab應用程式中
。
Voice SDK實際上不僅僅能從語音返回文字。它具有自然語言處理(NLP)功能來檢測命令(例如。取消),解析實體(例如。距離,時間,數量),分析情緒(積極的,中性的,或消極的)。您可以在這裡閱讀語音SDK文件。
Spatial Anchors是一項針對混合現實的新實驗功能,這意味著它還不能在Store或App Lab應用中使用。
開發人員已經可以使用passthrough——從Quest的灰度跟蹤相機的檢視——作為一個層(例如背景)或自定義網格(例如你面前的桌子)。空間錨是一種鎖定世界的參考框架,允許應用程式將內容放置在使用者在其房間中定義的特定位置。耳機將記住這些錨的位置之間的會議。你可以在這裡閱讀空間錨的文件。
% buffered00:00
00:25
明年Meta 計劃新增
場景理解
作為實驗性功能。系統會提示使用者(手動)標記他們的牆壁和傢俱,並輸入他們的天花板高度——這個過程稱為
場景捕捉
。這需要為每個房間完成,但耳機應該記住會話之間的場景模型。