您現在的位置是:首頁 > 網路遊戲首頁網路遊戲

Quest開發者可以開始使用語音識別和空間定位功能

簡介開發者現在可以將Meta的語音識別功能新增到Oculus Store和App Lab應用中,還可以試驗混合現實空間錨

空間錨是什麼

開發者現在可以將Meta的語音識別功能新增到Oculus Store和App Lab應用中,還可以試驗混合現實空間錨。

Voice SDK和Spatial Anchors都在Connect 2021釋出,現在作為Oculus SDK v35版本的一部分。

語音SDK由Wit提供動力。這是2015年Meta收購的語音介面公司。Wit是伺服器端,所以不能離線工作,有一些延遲。

Meta表示,這種新的API允許搜尋應用內部內容和“語音驅動的遊戲玩法”,如口頭魔法咒語或與虛擬角色的對話。雖然上個月釋出的Oculus SDK包括Voice SDK,

但它被標記為“實驗性的”,所以不能包含在Oculus Store或App Lab應用程式中

Quest開發者可以開始使用語音識別和空間定位功能

Voice SDK實際上不僅僅能從語音返回文字。它具有自然語言處理(NLP)功能來檢測命令(例如。取消),解析實體(例如。距離,時間,數量),分析情緒(積極的,中性的,或消極的)。您可以在這裡閱讀語音SDK文件。

Quest開發者可以開始使用語音識別和空間定位功能

Spatial Anchors是一項針對混合現實的新實驗功能,這意味著它還不能在Store或App Lab應用中使用。

開發人員已經可以使用passthrough——從Quest的灰度跟蹤相機的檢視——作為一個層(例如背景)或自定義網格(例如你面前的桌子)。空間錨是一種鎖定世界的參考框架,允許應用程式將內容放置在使用者在其房間中定義的特定位置。耳機將記住這些錨的位置之間的會議。你可以在這裡閱讀空間錨的文件。

% buffered00:00

00:25

明年Meta 計劃新增

場景理解

作為實驗性功能。系統會提示使用者(手動)標記他們的牆壁和傢俱,並輸入他們的天花板高度——這個過程稱為

場景捕捉

。這需要為每個房間完成,但耳機應該記住會話之間的場景模型。

Top