景中，終端A和終端B的視頻數據通過視頻轉發服務器轉發，并且終端A和終端B的實時游戲數據也通過游戲服務器轉發(例如需要游戲服務器維護狀態的游戲)；在第二種場景中，終端A和B的視頻數據和游戲數據都無需通過第三方服務器轉發；在第三種場景中，終端A和B的視頻數據不通過視頻轉發服務器轉發，而游戲數據需要通過游戲服務器轉發；在第四種場景中，終端A和B之間的視頻數據通過視頻轉發服務器轉發，而游戲數據無需通過第三方服務器轉發；在第五種場景中，終端A和B之間的視頻數據通過視頻轉發服務器轉發，而游戲數據則通過兩條通道轉發，其中，需要同步的游戲數據，經過游戲服務器轉發；而無需同步的游戲數據，則直接在終端A和B之間傳輸。在第六種場景中，終端A和B之間的視頻數據不通過視頻轉發服務器轉發，而游戲數據則通過兩條通道轉發，其中，需要同步的游戲數據，經過游戲服務器轉發，而無需同步的游戲數據，則直接在終端A和B之間傳輸。
[0021]本發明還提供一種智能手持設備點對點視頻和游戲的互動融合裝置，包括:本地視頻數據采集模塊，用于通過本地視頻采集設備采集本地視頻數據，并將其存放到本地視頻緩沖區；視頻數據傳輸模塊，用于接收對端設備通過網絡傳輸過來的視頻數據，將其暫存到遠端視頻緩沖區，并將本地視頻數據采集模塊采集的視頻數據通過網絡傳輸到對端設備；游戲數據傳輸模塊，用于將本地產生的實時游戲數據通過網絡傳輸到對端設備，并從網絡接收對端設備通過網絡傳輸過來的實時游戲數據，將其緩存在遠端游戲數據緩沖區；視頻窗口呈現策略庫，用于描述視頻窗口在游戲界面上的呈現策略；視頻與游戲融合模塊，用于依據視頻窗口呈現策略和本地及遠端的游戲實時狀態數據確定視頻在界面上的呈現坐標、形態和大小；界面呈現模塊，用于將融合后的數據顯示在界面上；游戲數據生成模塊，用于依據當前游戲界面、游戲邏輯和用戶在游戲界面的輸入，生成本地實時游戲數據，并置于本地游戲數據緩沖區。
[0022]進一步地，所述呈現策略包括:指定視頻窗口與游戲道具的綁定關系，綁定關系可以隨時間、空間的變化而變化；指定視頻窗口在顯示屏幕的固定位置、形態和大小；指定視頻窗口的位置、形態和大小隨時間的變化函數。
[0023]本發明還提供一種點對點視頻和游戲的融合系統，包括:發送端，通過智能手持設備的本地視頻捕捉設備捕捉本地的視頻并暫存到本地視頻緩沖區，并將本地視頻通過網絡傳輸接口傳輸到遠端會話，將依據當前游戲界面、游戲邏輯和用戶在游戲界面的輸入生成的本地實時游戲數據暫存到本地游戲數據緩沖區，并通過網絡傳輸接口傳輸到遠端會話；接收端，通過網絡傳輸接口接收遠端視頻數據，并將其存放到遠端視頻緩沖區，其中:視頻數據由發送端通過視頻捕捉設備捕捉，從網絡傳輸接口接收游戲數據，并將接收到的游戲數據存放到遠端游戲數據緩沖區，依據視頻窗口呈現策略和接收端用戶當前的存儲的本地和遠端游戲數據共同確定本地視頻窗口和遠端視頻窗口的呈現坐標、形態和大小，當游戲界面變化時，視頻窗口呈現的坐標、形態和大小可以隨之變化，在屏幕上呈現視頻和游戲融合后的界面。
[0024]本技術領域技術人員可以理解，本發明可以涉及用于執行本申請中所述操作中的一項或多項操作的設備。所述設備可以為所需的目的而專門設計和制造，或者也可以包括通用計算機中的已知設備，所述通用計算機有存儲在其內的程序選擇性地激活或重構。這樣的計算機程序可以被存儲在設備(例如，計算機)可讀介質中或者存儲在適于存儲電子指令并分別耦聯到總線的任何類型的介質中，所述計算機可讀介質包括但不限于任何類型的盤(包括軟盤、硬盤、光盤、CD-ROM、和磁光盤)、隨即存儲器(RAM)、只讀存儲器(ROM)、電可編程ROM、電可擦ROM(EPROM)、電可擦除可編程ROM(EEPROM)、閃存、磁性卡片或光線卡片。可讀介質包括用于以由設備(例如，計算機)可讀的形式存儲或傳輸信息的任何機構。例如，可讀介質包括隨即存儲器(RAM)、只讀存儲器(ROM)、磁盤存儲介質、光學存儲介質、閃存裝置、以電的、光的、聲的或其他的形式傳播的信號(例如載波、紅外信號、數字信號)坐寸O
[0025]本技術領域技術人員可以理解，可以用計算機程序指令來實現這些結構圖和/或框圖和/或流圖中的每個框以及這些結構圖和/或框圖和/或流圖中的框的組合。可以將這些計算機程序指令提供給通用計算機、專業計算機或其他可編程數據處理方法的處理器來生成機器，從而通過計算機或其他可編程數據處理方法的處理器來執行的指令創建了用于實現結構圖和/或框圖和/或流圖的框或多個框中指定的方法。
[0026]本技術領域技術人員可以理解，本發明中已經討論過的各種操作、方法、流程中的步驟、措施、方案可以被交替、更改、組合或刪除。進一步地，具有本發明中已經討論過的各種操作、方法、流程中的其他步驟、措施、方案也可以被交替、更改、重排、分解、組合或刪除。進一步地，現有技術中的具有與本發明中公開的各種操作、方法、流程中的步驟、措施、方案也可以被交替、更改、重排、分解、組合或刪除。
[0027]以上所述僅是本發明的部分實施方式，應當指出，對于本技術領域的普通技術人員來說，在不脫離本發明原理的前提下，還可以做出若干改進和潤飾，這些改進和潤飾也應視為本發明的保護范圍。
【主權項】
1.一種智能手持設備點對點視頻和游戲的互動融合方法，其特征在于，包括: 接收端通過網絡傳輸接口接收遠端視頻數據，并將其存放到遠端視頻緩沖區，其中:視頻數據由發送端通過視頻捕捉設備捕捉； 接收端從網絡傳輸接口接收游戲數據，并將接收到的游戲數據存放到遠端游戲數據緩沖區，其中，接收的游戲數據由發送端依據其當前游戲界面、游戲邏輯和發送端在游戲界面的輸入生成； 依據視頻窗口呈現策略和接收端用戶當前的游戲數據共同確定本地視頻窗口和遠端視頻窗口的呈現坐標、形態和大小，當游戲界面變化時，視頻窗口呈現的坐標、形態和大小可以隨之變化； 接收端在屏幕上呈現視頻和游戲融合后的界面。2.一種智能手持設備點對點視頻和游戲的互動融合裝置，其特征在于，包括: 本地視頻數據采集模塊，用于通過本地視頻采集設備采集本地視頻數據，并將其存放到本地視頻緩沖區； 視頻數據傳輸模塊，用于接收對端設備通過網絡傳輸過來的視頻數據，將其暫存到遠端視頻緩沖區，并將本地視頻數據采集模塊采集的視頻數據通過網絡傳輸到對端設備；游戲數據傳輸模塊，用于將本地產生的實時游戲數據通過網絡傳輸到對端設備，并從網絡接收對端設備通過網絡傳輸過來的實時游戲數據，將其緩存在遠端游戲數據緩沖區；視頻窗口呈現策略庫，用于描述視頻窗口在游戲界面上的呈現策略； 視頻與游戲融合模塊，用于依據視頻窗口呈現策略和本地及遠端的游戲實時狀態數據確定視頻在界面上的呈現坐標、形態和大小； 界面呈現模塊，用于將融合后的數據顯示在界面上； 游戲數據生成模塊，用于依據當前游戲界面、游戲邏輯和用戶在游戲界面的輸入，生成本地實時游戲數據，并置于本地游戲數據緩沖區。3.如權利要求2所述的裝置，其特征在于，所述呈現策略包括:指定視頻窗口與游戲道具的綁定關系，綁定關系可以隨時間、空間的變化而變化；指定視頻窗口在顯示屏幕的固定位置、形態和大小；指定視頻窗口的位置、形態和大小隨時間的變化函數。4.一種智能手持設備點對點視頻和游戲的互動融合系統，其特征在于，包括: 發送端，通過視頻捕捉設備捕捉本地的視頻并暫存到本地視頻緩沖區，并將本地視頻通過網絡傳輸接口傳輸到遠端會話，將依據當前游戲界面、游戲邏輯和用戶在游戲界面的輸入生成的本地實時游戲數據暫存到本地游戲數據緩沖區，并通過網絡傳輸接口傳輸到遠端會話； 接收端，通過網絡傳輸接口接收遠端視頻數據，并將其存放到遠端視頻緩沖區，其中:視頻數據由發送端通過視頻捕捉設備捕捉，從網絡傳輸接口接收游戲數據，并將接收到的游戲數據存放到遠端游戲數據緩沖區，依據視頻窗口呈現策略和接收端用戶當前的存儲的本地和遠端游戲數據共同確定本地視頻窗口和遠端視頻窗口的呈現坐標、形態和大小，當游戲界面變化時，視頻窗口呈現的坐標、形態和大小可以隨之變化，在屏幕上呈現視頻和游戲融合后的界面。
【專利摘要】本發明提供一種智能手持設備的點對點視頻和游戲的互動融合方法，包括：接收端通過網絡傳輸接口接收遠端視頻數據，并將其存放到遠端視頻緩沖區，其中：視頻數據由發送端通過視頻捕獲設備采集；接收端從網絡傳輸接口接收游戲數據，并將接收到的游戲數據存放到遠端游戲數據緩沖區，其中，接收的游戲數據由發送端依據其當前游戲界面、游戲邏輯和發送端在游戲界面的輸入生成；依據視頻窗口呈現策略和接收端用戶當前的本地和遠端游戲數據共同確定本地視頻窗口和遠端視頻窗口的呈現坐標、形態和大小，當游戲界面變化時，視頻窗口呈現的坐標、形態和大小可以隨之變化；接收端在屏幕上呈現視頻和游戲融合后的界面。因此，本發明提供的視頻會話和游戲能有機融合，提高用戶游戲時的互動性和趣味性。
【IPC分類】H04N7/14, A63F13/87
【公開號】CN105169703
【申請號】
【發明人】張國強, 張學淵, 張懷暢
【申請人】掌贏信息科技（上海）有限公司
【公開日】2015年12月23日
【申請日】2014年6月9日