虛擬現實設備中的數據處理方法及裝置與流程

本發明涉及數據領域，特別涉及虛擬現實(VR，Virtual Reality)設備中的數據處理方法及裝置。

背景技術：

VR設備如按硬件形態來分，主要可以分為移動端頭顯、外接式頭顯和一體機頭顯三種。其中，移動端頭顯需將移動終端放入VR設備，外接式頭顯需要連接個人電腦(PC，Personal Computer)，一體機頭顯具有獨立的中央處理器(CPU，Central Processing Unit)及輸入輸出功能。

無論哪一種VR設備，都需要單獨配置物理控制外設，例如遙控器和手柄等，來實現對VR設備中應用的操作。以通過VR設備玩射擊游戲為例，用戶需要手執遙控器，來完成視角、瞄準等控制。這些物理控制外設都是針對特定設備而配置，不具有通用性，并且功能簡單不能擴展。

技術實現要素：

本發明實施例提供了VR設備中的數據處理方法及裝置。為了對披露的實施例的一些方面有一個基本的理解，下面給出了簡單的概括。該概括部分不是泛泛評述，也不是要確定關鍵/重要組成元素或描繪這些實施例的保護范圍。其唯一目的是用簡單的形式呈現一些概念，以此作為后面的詳細說明的序言。

根據本發明實施例的第一方面，提供了一種VR設備中的數據處理方法，包括：接收移動終端中的第一感測部件產生的第一操作數據；利用所述第一操作數據，在所述VR設備中模擬所述第一感測部件；利用所述第一操作數據和所述VR中的第二感測部件產生的第二操作數據，生成針對所述VR設備中的同一應用的不同控制操作事件。

可選地，所述利用所述第一操作數據，在所述VR設備中模擬所述第一感測部件，包括：將應用層接收的所述第一操作數據，經由框架(Framework)層和硬件模擬層(HAL，Hardware Abstraction Layer)傳遞到內核(Kernel)層；在所述Kernel層將所述第一操作數據封裝成設定格式。

可選地，所述利用所述第一操作數據和所述VR設備中的第二感測部件產生的第二操作數據，生成針對所述VR設備中的同一應用的不同控制操作事件，包括：將所述第一操作數據和所述第二操作數據，經由HAL和Framework層上報至應用層；在所述應用層生成針對所述同一應用的不同控制操作事件。

可選地，述將所述第一操作數據和所述第二操作數據，經由HAL和Framework層上報至應用層，包括：針對所述第一操作數據和所述第二操作數據，按照所對應感測部件的類型分組；將分組后的數據，經由HAL和Framework層上報至應用層。

可選地，所述在所述應用層生成針對所述同一應用的不同控制操作事件，包括：按照設定優先級，在應用層分別調用所述第一操作數據和所述第二操作數據，分別生成不同控制操作事件。

根據本發明實施例的第二方面，提供一種VR設備中的數據處理裝置，包括：接收模塊，用于接收移動終端中的第一感測部件產生的第一操作數據；模擬模塊，用于利用所述第一操作數據，在所述VR設備中模擬所述第一感測部件；生成模塊，用于利用所述第一操作數據和所述VR設備中的第二感測部件產生的第二操作數據，生成針對所述VR設備中的同一應用的不同控制操作事件。

可選地，所述模擬模塊，包括：傳遞子模塊，用于將應用層接收的所述第一操作數據，經由Framework層和HAL傳遞到Kernel層；封裝子模塊，用于在所述Kernel層將所述第一操作數據封裝成設定格式。

可選地，所述生成模塊，包括：上報子模塊，用于將所述第一操作數據和所述第二操作數據，經由HAL和Framework層上報至應用層；生成子模塊，用于在所述應用層生成針對所述同一應用的不同控制操作事件。

可選地，上報子模塊，包括：分組子模塊，用于針對所述第一操作數據和所述第二操作數據，按照所對應感測部件的類型分組；執行子模塊，用于將分組后的數據，經由HAL和Framework層上報至應用層。

根據本發明實施例的第三方面，提供了一種VR設備中的數據處理裝置，處理器；存儲所述處理器執行的指令的存儲器；其中，所述處理器被配置為：接收移動終端中的第一感測部件產生的第一操作數據；利用所述第一操作數據，在所述VR設備中模擬所述第一感測部件；利用所述第一操作數據和所述VR設備中的第二感測部件產生的第二操作數據，生成針對所述VR設備中的同一應用的不同控制操作事件。

本發明實施例提供的技術方案可以包括以下有益效果：

利用來自移動終端中第一感測部件的第一操作數據，在VR設備中模擬第一感測部件，并利用第一操作數據和VR設備中第二感測部件產生的第二操作數據，生成針對VR設備中的同一應用的不同控制操作，從而使得用戶通過移動終端即可實現對VR設備中應用的多元化控制，具有通用性，且基于移動終端的多樣化功能，能夠實現更豐富的控制操作。

應當理解的是，以上的一般描述和后文的細節描述僅是示例性和解釋性的，并不能限制本發明。

附圖說明

此處的附圖被并入說明書中并構成本說明書的一部分，示出了符合本發明的實施例，并與說明書一起用于解釋本發明的原理。

圖1是根據一示例性實施例示出的VR設備中的數據處理方法的流程圖；

圖2是根據一示例性實施例示出的安卓系統架構示意圖；

圖3是根據一示例性實施例示出的VR設備中的數據處理方法的流程圖；

圖4是根據一示例性實施例示出的VR設備中的數據處理裝置的示意圖；

圖5是根據一示例性實施例示出的VR設備中的數據處理裝置的示意圖；

圖6是根據一示例性實施例示出的VR設備中的數據處理裝置的示意圖。

具體實施方式

以下描述和附圖充分地示出本發明的具體實施方案，以使本領域的技術人員能夠實踐它們。實施例僅代表可能的變化。除非明確要求，否則單獨的部件和功能是可選的，并且操作的順序可以變化。一些實施方案的部分和特征可以被包括在或替換其他實施方案的部分和特征。本發明的實施方案的范圍包括權利要求書的整個范圍，以及權利要求書的所有可獲得的等同物。在本文中，各實施方案可以被單獨地或總地用術語“發明”來表示，這僅僅是為了方便，并且如果事實上公開了超過一個的發明，不是要自動地限制該應用的范圍為任何單個發明或發明構思。本文中，諸如第一和第二等之類的關系術語僅僅用于將一個實體或者操作與另一個實體或操作區分開來，而不要求或者暗示這些實體或操作之間存在任何實際的關系或者順序。而且，術語“包括”、“包含”或者其任何其他變體意在涵蓋非排他性的包含，從而使得包括一系列要素的過程、方法或者設備不僅包括那些要素，而且還包括沒有明確列出的其他要素。本文中各個實施例采用遞進的方式描述，每個實施例重點說明的都是與其他實施例的不同之處，各個實施例之間相同相似部分互相參見即可。對于實施例公開的裝置、結構、產品等而言，由于其與實施例公開的部分相對應，所以描述的比較簡單，相關之處參見方法部分說明即可。

圖1是根據一示例性實施例示出的VR設備中的數據處理方法的流程圖。

在步驟101中，接收移動終端中的第一感測部件產生的第一操作數據。

所述移動終端可為用戶手機或平板等便攜式的終端。第一感測部件可為移動終端內的重力感應器、陀螺儀感應器、光線感應器、觸摸屏和麥克風中的一個或多個。第一操作數據為第一感測部件產生的數據，即重力感應器產生重力感應數據，陀螺儀感應器產生陀螺儀數據，光線感應器產生光感數據，觸摸屏產生觸摸事件數據，麥克風產生聲音數據。

在步驟102中，利用所述第一操作數據，在所述VR設備中模擬所述第一感測部件。

VR設備為移動端頭顯、外接頭戴式和一體機頭顯中任意一種設備。VR設備對接收到的移動終端的第一操作數據進行處理，以在VR設備中模擬第一感測部件，實現移動終端對VR設備中的應用的控制。

在步驟103中，利用所述第一操作數據和所述VR設備中的第二感測部件產生的第二操作數據，生成針對所述VR設備中的同一應用的不同控制操作事件。

VR設備本身具有第二感測部件，可以為重力感應器和陀螺儀感應器等感測部件中的一個或多個。第二操作數據為第二感測部件產生的數據，即重力感應器產生重力感應數據，陀螺儀感應器產生陀螺儀數據。通過步驟102中模擬第一感測部件，再結合VR設備中本身具有的第二感測部件，當利用移動終端對VR設備中的應用控制操作時，VR設備中存在兩部分數據，分別為第一操作數據和第二操作數據。VR設備根據兩部分數據實現同一應用不同控制操作。

綜上所述，本實施例提供的方法，利用來自移動終端中第一感測部件產生的第一操作數據，在VR設備中模擬第一感測部件，并利用第一操作數據和VR設備中第二感測部件產生的第二操作數據，生成針對VR設備中的同一應用的不同控制操作，從而使得用戶通過移動終端即可實現對VR設備中應用的多元化控制，具有通用性，且基于移動終端的多樣化功能，能夠實現更豐富的控制操作。

圖2是根據一示例性實施例示出的安卓系統架構示意圖。

安卓系統架構從上往下分為應用層201，Framework層202，HAL203，Kernel層204和Hardware層205。上面的五個層次，下層為上層服務，上層需要下層的支持，調用下層的服務。

圖3是根據一示例性實施例示出的VR設備中的數據處理方法的流程圖。

為了便于說明，不再對與前述實施例相同的步驟或相似的步驟進行詳細展開，而僅重點說明與前述實施例的不同之處。在圖1和圖3中，對于前述實施例相同或相似的步驟，采用了相同的附圖標記。

在步驟101中，接收移動終端中的第一感測部件產生的第一操作數據。

移動終端通過網絡與VR設備建立通信，通信方式為套接字(socket)通信。VR設備在應用層201接收移動終端中的第一感測部件產生的第一操作數據。

在步驟302中，將應用層201接收的所述第一操作數據，經由Framework層202和HAL203傳遞到Kernel層204。

在步驟303中，在所述Kernel層204將所述第一操作數據封裝成設定格式。

在本實施例中，VR設備系統中預先安裝位于Kernel層的驅動程序，驅動程序將第一操作數據封裝成VR設備能夠識別的格式，例如標準的安卓數據格式。

在步驟304中，針對所述第一操作數據和所述第二操作數據，按照所對應感測部件的類型分組。

當第一感測部件和第二感測部件為相同類型的部件，則VR設備中包含兩組相同類型的數據。例如：第一感測部件和第二感測部件同為重力傳感器，則VR設備中包含兩組重力感應數據。第一感測部件和第二感測部件同為陀螺儀傳感器，則VR設備中包含兩組陀螺儀感應數據。當第一感測部件和第二感測部件為不同類型的部件，則VR設備中包含兩組不同類型的數據。當第一感測部件為多個，第二感測部件與第一感測部件中的一個類型相同時，則VR設備中包含相同類型和不同類型的數據。例如：第一感測部件為觸摸屏和陀螺儀感應器，第二感測部件為陀螺儀感應器。則第一操作數據為觸摸事件數據和陀螺儀數據，第二操作數據為陀螺儀數據。則VR設備中存在兩組陀螺儀數據和一組觸摸事件數據。

驅動程序針對所述第一操作數據和所述第二操作數據，按照所對應感測部件的類型分組，便于對數據進行調用生成不同控制操作事件。

在步驟305中，將分組后的數據，經由HAL和Framework層上報至應用層。

驅動程序對第一操作數據和第二操作數據分組后，由驅動程序接口輸出數據經由HAL203和Framework層202向應用層201上報。

在步驟306中，按照設定優先級，在應用層分別調用所述第一操作數據和所述第二操作數據，分別生成不同控制操作事件。

對于移動終端產生的第一操作數據和VR設備產生的第二操作數據的調用順序事先設定優先級。例如：當同時存在第一操作數據和第二操作數據時，先調用第一操作數據生成對應用的控制操作事件，然后調用第二操作數據生成對同一應用的不同控制操作事件。

綜上所述，本實施例提供的方法，利用來自移動終端中第一感測部件的第一操作數據，在VR設備中模擬第一感測部件，對第一操作數據和VR設備中第二感測部件產生的第二操作數據進行分組，按照預先設定的優先級，調用第一操作數據和第二操作數據生成針對VR設備中的同一應用的不同控制操作，從而使得用戶通過移動終端即可實現對VR設備中應用的多元化控制，具有通用性，且基于移動終端的多樣化功能，能夠實現更豐富的控制操作。

針對VR設備中無法操控的一些情況，通過在VR設備中模擬移動終端中的第一感測部件，可以實現通過移動終端控制VR設備中的應用，下面給出幾個舉例。

在一些實施例中，VR設備里面安裝了一個需要重力感應器或陀螺儀感應器才能玩的應用，原來需要晃動頭部，根據VR設備產生的重力感應數據或陀螺儀數據控制操作游戲。根據本實施例提出的方法，如在VR設備中模擬移動終端中的第一感測部件，則只需要晃動移動終端，根據移動終端產生的重力感應數據或陀螺儀數據便可以控制操作游戲。

在另一些實施例中，VR設備里安裝了一個需要觸摸的才能玩的應用，VR設備本身是無法完成觸摸操作的，或者需要使用物理操控器才能完成觸摸操作，根據本實施例提出的方法，如在VR設備中模擬移動終端中的第一感測部件，只需要觸摸移動終端的屏幕，移動終端產生觸摸事件數據就能完成觸摸操作。

在另一些實施例中，VR設備里安裝了一個需要錄音的應用，原來需要額外插入麥克風，根據本實施例提出的方法，如在VR設備中模擬移動終端中的第一感測部件，只需要移動終端的麥克風產生聲音數據即可完成控制操作。

針對VR設備中具有第二感測部件的情況，下面也給出舉例。

VR設備里安裝了一個射擊類游戲，用戶需要手執遙控器，來完成視角、瞄準等控制。根據本實施例提出的方法，如在VR設備中模擬移動終端中的第一感測部件，用戶晃動移動終端，控制瞄準方向，并晃動頭部，控制視角。用戶晃動移動終端，移動終端的陀螺儀感應器產生第一操作數據陀螺儀數據，并將陀螺儀數據發送給VR設備，VR設備在應用層201接收移動終端的陀螺儀數據，通過步驟302經由Framework層202和HAL203傳遞到Kernel層204，通過步驟303由VR設備預先安裝的驅動程序封裝成標準的安卓數據格式。用戶晃動頭部，VR設備的陀螺儀感應器產生第二操作數據陀螺儀數據。此時，VR設備中有兩組陀螺儀數據。通過步驟304驅動程序針對所述第一操作數據和所述第二操作數據，按照所對應感測部件的類型分組。然后通過步驟305將分組后的數據經由HAL203和Framework層202上報至應用層201。在VR設備中對于調用數據的先后順序設定優先級，通過步驟306按照設定優先級，在應用層分別調用所述第一操作數據和所述第二操作數據，分別生成不同控制操作事件。例如：當存在兩組相同類型的操作數據時，先調用第一操作數據，則此時先調用移動終端產生的陀螺儀數據調整武器(例如：刀或槍)的瞄準方向，然后調用VR設備產生的陀螺儀數據調整視角；當存在兩組相同類型的操作數據時，先調用第二操作數據，則此時先調用VR設備產生的陀螺儀數據調整視角，然后調用移動終端產生的陀螺儀數據調整武器的瞄準方向。

針對移動終端中的第一感測部件包括兩個，VR設備中的第二感測部件為一個的情況，下面也給出舉例。

VR設備里安裝了一個射擊類游戲，用戶需要手執遙控器，來完成視角、瞄準、加速前進等控制。根據本實施例提出的方法，如在VR設備中模擬移動終端中的第一感測部件，用戶晃動頭部，控制視角；晃動移動終端，控制瞄準方向；點擊觸摸屏，控制前進速度。用戶晃動移動終端，移動終端的陀螺儀感應器產生第一操作數據陀螺儀數據，在移動終端的應用程序中設置一個加速前進按鈕，當游戲中的人物距離下一目的地較遠時，需要加速前進，此時用戶點擊觸摸屏，移動終端的觸摸屏產生第一操作數據觸摸事件數據，并將陀螺儀數據和觸摸事件數據發送給VR設備，VR設備在應用層201接收移動終端的陀螺儀數據和觸摸事件數據，通過步驟302經由Framework層202和HAL203傳遞到Kernel層204，通過步驟303由VR設備預先安裝的驅動程序封裝成標準的安卓數據格式。用戶晃動頭部，VR設備的陀螺儀感應器產生第二操作數據陀螺儀數據。此時，VR設備中有兩組陀螺儀數據和一組觸摸事件數據。通過步驟304驅動程序針對所述第一操作數據和所述第二操作數據，按照所對應感測部件的類型分組，分成兩組分別為陀螺儀數據和觸摸事件數據，然后通過步驟305將分組后的數據經由HAL203和Framework層202上報至應用層201。在VR設備中對于調用數據的先后順序設定優先級，通過306按照設定優先級，在應用層分別調用所述第一操作數據和所述第二操作數據，分別生成不同控制操作事件。例如：當存在兩組不同類型的操作數據時，先調用陀螺儀數據，然后調用觸摸事件數據；當存在兩組相同類型的第一操作數據和第二操作數據時，先調用第一操作數據。則此時先調用移動終端產生的陀螺儀數據調整武器(例如：刀或槍)的瞄準方向，再調用VR設備產生的陀螺儀數據調整視角，然后調用移動終端產生的觸摸事件數據調整前進速度。若當存在兩組不同類型的操作數據時，先調用陀螺儀數據，然后調用觸摸事件數據；當存在兩組相同類型的第一操作數據和第二操作數據時，先調用第二操作數據。則此時先調用VR設備產生的陀螺儀數據調整視角，再調用移動終端產生的陀螺儀數據調整武器的瞄準方向，然后調用移動終端產生的觸摸事件數據調整前進速度。若當存在兩組不同類型的操作數據時，先調用觸摸事件數據，然后調用陀螺儀數據；當存在兩組相同類型的第一操作數據和第二操作數據時，先采用第一操作數據。則此時先調用移動終端產生的觸摸事件數據調整前進速度，再調用移動終端產生的陀螺儀數據調整武器的瞄準方向，然后調用VR設備產生的陀螺儀數據調整視角。若當存在兩組不同類型的操作數據時，先調用觸摸事件數據，然后調用陀螺儀數據；當存在兩組相同類型的第一操作數據和第二操作數據時，先調用第二操作數據。則此時先調用移動終端產生的觸摸事件數據調整前進速度，再調用VR設備產生的陀螺儀數據調整視角，然后調用移動終端產生的陀螺儀數據調整武器的瞄準方向。

在本實施例中，利用來自移動終端中第一感測部件的第一操作數據，在VR設備中模擬第一感測部件，并利用第一操作數據和VR設備中第二感測部件產生的第二操作數據，生成針對VR設備中的射擊類游戲的不同控制操作，VR設備產生的陀螺儀數據調整武器的瞄準方向，移動終端產生的陀螺儀數據調整視角，從而使得用戶通過移動終端即可實現對VR設備中應用的多元化控制，移動終端可以與多臺VR設備配合使用，具有通用性，且基于移動終端的多樣化功能，能夠實現更豐富的控制操作。

圖4是根據一示例性實施例示出的VR設備中的數據處理裝置的示意圖。該數據裝置應用于VR設備中，如圖4所示，該數據處理裝置包括：接收模塊401、模擬模塊402、生成模塊403。

接收模塊401，用于接收移動終端中的第一感測部件產生的第一操作數據。

模擬模塊402，用于利用接收模塊401接收的所述第一操作數據，在所述VR設備中模擬所述第一感測部件。

生成模塊403，用于利用所述第一操作數據和所述VR設備中的第二感測部件產生的第二操作數據，生成針對所述VR設備中的同一應用的不同控制操作事件。

綜上所述，本實施例提供的裝置，通過接收模塊401接收移動終端發送的第一操作數據，模擬模塊402利用該第一操作數據在VR設備中模擬產生該第一操作數據的第一感測部件，生成模塊403利用第一操作數據和VR設備產生的第二操作數據生成對VR設備中同一應用的操作事件，解決了物理控制外設都是針對特定設備而配置，不具有通用性，達到了利用移動終端即可實現對VR設備中應用的多元化控制，具有通用性的效果。

圖5是根據一示例性實施例示出的VR設備中的數據處理裝置的示意圖。

為了便于說明，不再對與前述實施例相同的模塊進行詳細展開，而僅重點說明與前述實施例的不同之處。在圖5中，對于前述實施例相同的模塊，采用了相同的附圖標記。

可選地，模擬模塊402包括傳遞子模塊501和封裝子模塊502。傳遞子模塊501，用于將應用層201接收的所述第一操作數據，經由Framework層202和HAL203傳遞到Kernel層204。封裝子模塊502，用于在所述Kernel層204將所述第一操作數據封裝成設定格式。

可選地，生成模塊403包括上報子模塊503和生成子模塊504。上報子模塊503，用于將所述第一操作數據和所述第二操作數據，經由HAL203和Framework層202上報至應用層201。生成子模塊504，用于在所述應用層201生成針對所述同一應用的不同控制操作事件。所述生成子模塊504，按照設定的優先級，在應用層201調用所述第一操作數據和所述第二操作數據，分別生成不同控制操作事件。

綜上所述，本實施例提供的裝置，封裝子模塊502對移動終端發送的第一操作數據進行封裝處理，使得第一操作數據可以被VR設備采用，傳遞子模塊501和上報子模塊503對第一操作數據和VR設備產生的第二操作數據在各個數據層間進行傳遞，生成子模塊504對第一操作數據和第二操作數據按照優先級依次調用，實現了通過移動終端實現對VR設備中應用的多元化控制，具有通用性，且基于移動終端的多樣化功能，能夠實現更豐富的控制操作。

圖6是根據一示例性實施例示出的VR設備中的數據處理裝置的示意圖。

為了便于說明，不再對與前述實施例相同的模塊進行詳細展開，而僅重點說明與前述實施例的不同之處。在圖6中，對于前述實施例相同的模塊，采用了相同的附圖標記。

可選地，上報子模塊503包括分組子模塊601和執行子模塊602。分組子模塊601，用于針對所述第一操作數據和所述第二操作數據，按照所對應感測部件的類型分組。執行子模塊602，用于將分組后的數據，經由HAL203和Framework層202上報至應用層201。

綜上所述，本實施例提供的裝置，分組子模塊601對移動終端發送的第一操作數據和VR設備產生的第二操作數據按照對應的感測部件進行分組，執行子模塊602，將分組后的數據上傳到應用層201，實現了數據的合理化處理。

在示例性實施例中，還提供了一種包括指令的非臨時性計算機可讀存儲介質，例如包括指令的存儲器，上述指令可由處理器執行以完成前文所述的方法。上述非臨時性計算機可讀存儲介質可以是只讀存儲器(ROM，Read Only Memory)、隨機存取存儲器(RAM，Random Access Memory)、磁帶和光存儲設備等。

本領域普通技術人員可以意識到，結合本文中所公開的實施例描述的各示例的模塊及算法步驟，能夠以電子硬件、或者計算機軟件和電子硬件的結合來實現。這些功能究竟以硬件還是軟件方式來執行，取決于技術方案的特定應用和設計約束條件。所屬技術人員可以對每個特定的應用來使用不同方法來實現所描述的功能，但是這種實現不應認為超出本發明的范圍。所屬領域的技術人員可以清楚地了解到，為描述的方便和簡潔，上述描述的系統、裝置和模塊的具體工作過程，可以參考前述方法實施例中的對應過程，在此不再贅述。

本文所披露的實施例中，應該理解到，所揭露的方法、產品(包括但不限于裝置、設備等)，可以通過其它的方式實現。例如，以上所描述的裝置實施例僅僅是示意性的，例如，所述模塊的劃分，僅僅為一種邏輯功能劃分，實際實現時可以有另外的劃分方式，例如多個模塊或組件可以結合或者可以集成到另一個系統，或一些特征可以忽略，或不執行。另一點，所顯示或討論的相互之間的耦合或直接耦合或通信連接可以是通過一些接口，裝置或模塊的間接耦合或通信連接，可以是電性，機械或其它的形式。所述作為分離部件說明的模塊可以是或者也可以不是物理上分開的，作為模塊顯示的部件可以是或者也可以不是物理模塊，即可以位于一個地方，或者也可以分布到多個網絡模塊上。可以根據實際的需要選擇其中的部分或者全部模塊來實現本實施例方案的目的。另外，在本發明各個實施例中的各功能模塊可以集成在一個處理模塊中，也可以是各個模塊單獨物理存在，也可以兩個或兩個以上模塊集成在一個模塊中。

應當理解的是，本發明并不局限于上面已經描述并在附圖中示出的流程及結構，并且可以在不脫離其范圍進行各種修改和改變。本發明的范圍僅由所附的權利要求來限制。