公開了用于提供沉浸式現實界面模式的系統、設備和方法。設備包括觸覺致動器、計算單元、手勢檢測系統和沉浸式現實顯示設備。手勢檢測系統檢測由用戶在與沉浸式現實環境交互期間做出的手勢，該沉浸式現實環境由沉浸式現實顯示設備顯示。計算單元生成并操作用戶可以通過其經由手勢與沉浸式現實環境進行交互的界面模式，并協調觸覺、視覺和音頻輸出的提供。

技術領域

本發明的實施例涉及提供用于在沉浸式現實環境中執行動作的界面模式的系統、設備和方法。具體而言，本發明的實施例提供觸覺和視覺線索和指示符，以促進和改善與沉浸式現實環境的交互。

背景技術

包括增強現實、混合顯示、融合現實和虛擬現實的沉浸式現實環境在流行度和使用面上日益提高。其中用戶與這些環境交互的模式和系統并未標準化，并且經常是笨拙不直觀的，并且依賴于視覺和音頻反饋?，F有界面模式的不足限制了交互式沉浸式現實系統的使用和吸引力。

傳統交互式沉浸式現實系統存在這些和其它缺點。本文描述的發明解決了這些缺點。

發明內容

本發明的實施例包括被配置為產生變化的界面模式以促進和改善與沉浸式現實環境的用戶交互的系統。所提供的界面模式被具體配置用于輕松交互以及訓練人類用戶通過容易被訓練和保留在肌肉記憶中的手勢來與界面模式交互。界面模式借助于觸覺、視覺和音頻反饋的提供，以在與本文討論的界面模式的交互期間向用戶提供完整的感官體驗。系統還包括沉浸式現實顯示器、一個或多個觸覺輸出設備以及一個或多個手勢檢測系統中的一者或多者。手勢檢測系統用于捕獲用戶做出的手勢。沉浸式現實顯示器和觸覺輸出設備分別用于提供視覺和觸覺反饋。音頻輸出還可以作為獨立設備或作為任何一個其他描述設備的附加功能而被包括。

系統的計算單元提供能夠基于啟動手勢被用戶訪問的界面模式。在交互期間，觸覺輸出設備提供觸覺反饋，以通過“感受”來在整個界面模式中引導用戶。觸覺輸出輔助用戶學習適當的手勢來利用界面模式進行工作，而不要求完全依賴于沉浸式現實環境中的視空間技能。

在實施例中，提供了用于在沉浸式現實交互期間提供觸覺效果的系統。系統包括：至少一個傳感器，被配置為檢測用戶手勢信息；至少一個觸覺輸出設備，被配置為向用戶提供觸覺效果；沉浸式現實顯示設備；和至少一個處理器。該至少一個處理器被配置為接收用戶手勢信息，從手勢信息中確定啟動手勢，根據啟動手勢激活界面模式，該界面模式包括經由沉浸式現實顯示設備提供的交互式視覺顯示，根據啟動手勢的位置錨定界面模式，從用戶手勢信息中確定交互手勢，響應于交互手勢提供動態觸覺效果，從手勢信息中確定選擇手勢，響應于選擇手勢確定選擇觸覺效果，以及經由沉浸式現實顯示設備提供選擇視覺顯示。

在實施例中，提供了在沉浸式現實交互期間提供觸覺效果的計算機實現的方法。該方法包括通過至少一個傳感器檢測用戶手勢信息，經由沉浸式現實顯示設備提供沉浸式現實顯示，通過至少一個處理器接收用戶手勢信息，通過該至少一個處理器從手勢信息中確定啟動手勢，通過該至少一個處理器根據啟動手勢激活界面模式，該界面模式包括經由沉浸式現實顯示設備提供的交互式視覺顯示，通過該至少一個處理器根據啟動手勢的位置錨定界面模式，通過該至少一個處理器從用戶手勢信息中確定交互手勢，通過至少一個觸覺輸出設備響應于交互手勢來提供動態、靜態或離散的觸覺效果，通過該至少一個處理器從手勢信息中確定選擇手勢，通過該至少一個處理器響應于選擇手勢確定選擇觸覺效果，通過該至少一個觸覺輸出設備傳達選擇觸覺效果，以及通過沉浸式現實顯示設備提供選擇視覺顯示。

附圖說明

本發明的前述和其它特征和優勢將從以下對如附圖所示的本發明的實施例的描述中變得清晰。并入本文并形成說明書的一部分的附圖進一步用于解釋本發明的原理并使相關領域技術人員能夠制造和使用本發明。附圖不是按比例的。

圖1示出與本發明實施例一致的提供沉浸式現實界面模式的系統。

圖2是與本發明實施例一致的用于提供沉浸式現實界面模式的系統的示意圖。