本發明屬于移動直播技術領域，特別是一種直播互動方法和系統。

背景技術：

網絡直播吸取和延續互聯網的優勢，利用視訊方式進行網上現場直播，可以將才藝展示、產品展示、相關會議、背景介紹、方案測評、網上調查、對話訪談、在線培訓等內容現場發布到互聯網上，利用互聯網的直觀、快速，表現形式好、內容豐富、交互性強、地域不受限制、受眾可劃分等特點，加強活動現場的推廣效果。現場直播完成后，還可以隨時為讀者繼續提供重播、點播，有效延長了直播的時間和空間，發揮直播內容的最大價值。

目前，通常在現場架設獨立的信號采集設備(音頻+視頻)，再通過網絡上傳至服務器，發布至網址供人觀看?，F有的直播系統構成主要包括：手機采集攝像頭視頻數據和音頻模塊采集音頻數據，通過美顏軟件處理，然后把音視頻合成推送到(內容分發網絡(Content Delivery Network，CDN)平臺，線上的用戶在平臺上收看直播內容源，同時和發起直播用戶使用彈幕、消息欄、虛擬道具、虛擬禮物進行互動

然而，現有的直播軟件在用戶互動環境中只能贈送虛擬的道具和禮物，無法贈送實際的超市物品或者現實的物品。

另外，現有的視頻直播基本上只有美顏等功能，無法結合增強顯示(AR)功能，將酷炫的視頻內容直播出去。而且，現有的直播主要利用手機，受限于手機攝像頭的焦距，畫面有限，無法滿足多人直播，而且還經常受到手機電池容量的限制。還有，手機攝像頭在拍攝過程中容易抖動，拍攝的視頻易不清晰；且手機攝像頭在移動拍攝過程中，網絡信號不好，容易引起直播卡頓。

技術實現要素：

本發明實施方式提出一種直播互動方法和系統，從而實現贈送真實物品，并由此提高互動性。

本發明實施方式的技術方案如下：

一種直播互動方法，該方法包括：

從接收數字視聽場所的數字視聽單元中直播內容的終端處，接收針對實物的實物訂單信息，基于所述實物訂單信息生成實物待支付信息，并當所述終端基于所述實物待支付信息完成支付后，向所述數字視聽場所的數字視聽單元分發所述實物。

在一個實施方式中，該方法還包括：

基于移動終端確定直播內容，將所述直播內容發送到云端，以由云端生成直播內容的播放地址；或

基于包廂點歌終端確定直播內容，將所述直播內容發送到云端，以由云端生成直播內容的播放地址。

在一個實施方式中，所述基于移動終端確定直播內容包括：

當直播用戶在移動終端上選定以所述移動終端作為直播錄制源時，使能所述移動終端錄制所述直播用戶的視頻以作為所述直播內容；或，當直播用戶在所述移動終端上選定以布置在所述數字視聽場所的數字視聽單元中的攝像頭作為直播錄制源時，使能所述攝像頭錄制所述直播用戶的視頻，并將所述直播用戶的視頻與預定的虛擬場景模型作出增強現實處理以作為所述直播內容；或，當直播用戶在所述移動終端上選定以所述移動終端及布置在數字視聽場所的數字視聽單元中的攝像頭共同作為直播錄制源時，使能所述移動終端錄制所述直播用戶的視頻，使能所述攝像頭錄制所述直播用戶的視頻，并將所述移動終端錄制的視頻、所述直播用戶的視頻與預定的虛擬場景模型作出增強現實處理以作為所述直播內容；或，當直播用戶在所述移動終端上選定以布置在所述數字視聽場所的數字視聽單元中的攝像頭作為直播錄制源時，使能所述攝像頭錄制所述直播用戶的視頻，并將所述直播用戶的視頻作為所述直播內容；

或

所述基于包廂點歌終端確定直播內容包括：當直播用戶在所述包廂點歌終端上選定以布置在所述數字視聽場所的數字視聽單元中的攝像頭作為直播錄制源時，使能所述攝像頭錄制所述直播用戶的視頻，并將所述直播用戶的視頻作為所述直播內容；或，當直播用戶在所述包廂點歌終端上選定以布置在所述數字視聽場所的數字視聽單元中的攝像頭作為直播錄制源時，使能所述攝像頭錄制所述直播用戶的視頻，并將所述直播用戶的視頻與預定的虛擬場景模型作出增強現實處理以作為所述直播內容。

在一個實施方式中，所述接收數字視聽場所的數字視聽單元中直播內容包括：

終端通過微信連接到直播頁面接收所述直播內容；和/或

終端通過預定的應用程序接收所述直播內容。

在一個實施方式中，所述實物包括下列中的至少一個：

酒類；飲料；零食；鮮花；水果；熟食；玩具；服裝；飾品。

在一個實施方式中，該方法還包括：

經由與數字視聽場所的數字視聽單元中的機頂盒在同一局域網中的支付管理平臺，從與所述數字視聽場所的數字視聽單元相綁定的移動終端接收訂單信息；

經由所述支付管理平臺通過局域網將所述訂單信息發送到網關服務器，以由所述網關服務器經由互聯網將所述訂單信息發送到云端服務器，并由云端服務器經由互聯網將所述訂單信息發送到支付平臺；

經由所述支付管理平臺通過局域網從網關服務器接收待支付信息，所述待支付信息由支付平臺基于訂單信息生成、并經由互聯網發送到云端服務器，再由云端服務器經由互聯網發送到網關服務器；

展示所述待支付信息，以由移動終端基于所述待支付信息執行支付；

或，該方法還包括：支付平臺經由互聯網向云端服務器返回支付結果；云端服務器經由互聯網將支付結果發送到網關服務器；網關服務器經由局域網向支付管理平臺發送支付結果；

或，該方法還包括：當增加新的支付平臺時，云端服務器進一步建立與新的支付平臺的互聯網連接；云端服務器基于預定策略選擇目標支付平臺，并將所述訂單信息發送到所述目標支付平臺；或，當所述支付平臺被替換為另外的支付平臺時，云端服務器進一步建立與所述另外的支付平臺的互聯網連接；云端服務器經由互聯網將所述訂單信息發送到所述另外的支付平臺；或，當支付平臺被刪除時，云端服務器刪除與所述支付平臺的互聯網連接。

在一個實施方式中，所述經由局域網中的支付管理平臺接收訂單信息包括：

經由所述局域網從所述機頂盒接收訂單信息；其中：所述訂單信息是由用戶在移動終端觸發，并由移動終端經由所述局域網發送到機頂盒的；或，經由所述局域網從支付服務器接收訂單信息；其中：所述訂單信息是由管理人員在支付服務器上觸發的；

或

所述支付服務器的數目為一或多個；和/或，所述待支付信息包括具有二維碼形式或條形碼形式的支付碼，或銀行類的支付鏈接。

在一個實施方式中，該方法還包括：

錄制所述實物的視頻或圖片；

在所述數字視聽場所的數字視聽單元中顯示所述直播內容及所述實物的視頻或圖片。

在一個實施方式中，該方法還包括：將第一對象更新到所述虛擬場景模型中，并在接收到互動指令時，根據互動指令將互動內容更新到所述虛擬場景模型中，以得到所述直播內容；

其中所述第一對象包括下列中的至少一個：真人對象；寵物；植物。

在一個實施方式中，將第一對象更新到所述虛擬場景模型中包括：實時獲取一個以上攝像裝置的信號，采集得到一個以上的第一圖像數據；根據預設的條件，從每個第一圖像數據中提取一個以上的第一對象，將一個以上的第一對象實時更新到虛擬場景模型中；

所述互動內容還包括第一素材的內容數據，所述第一素材包括：文字素材、圖像素材、聲音素材或圖像素材與聲音素材的結合；或，所述虛擬場景模型為3D虛擬舞臺。

一種直播互動系統，包括：

云端服務器，用于基于數字視聽場所的數字視聽單元中直播內容生成播放地址；

支付平臺，用于從基于所述播放地址觀看直播內容的終端處，接收針對實物的實物訂單信息，基于所述實物訂單信息生成實物待支付信息，并當所述終端基于所述實物待支付信息完成支付后，向所述數字視聽場所的數字視聽單元分發所述實物。

在一個實施方式中，還包括：

移動終端，用于當直播用戶在所述移動終端上選定以所述移動終端作為直播錄制源時，錄制所述直播用戶的視頻以作為直播內容或將所述直播用戶的視頻與預定的虛擬場景模型作出增強現實處理以作為所述直播內容，將所述直播內容發送到云端服務器；

布置在所述數字視聽場所的數字視聽單元中的攝像頭，用于當直播用戶在所述移動終端上選定以所述攝像頭作為直播錄制源時，錄制所述直播用戶的視頻以作為直播內容，或將所述直播用戶的視頻與預定的虛擬場景模型作出增強現實處理以作為直播內容，將所述直播內容發送到云端服務器；

包廂點歌終端，用于當直播用戶在所述包廂點歌終端上選定以所述攝像頭作為直播錄制源時，使能所述攝像頭錄制所述直播用戶的視頻并將所述直播用戶的視頻作為所述直播內容，或將所述直播用戶的視頻與預定的虛擬場景模型作出增強現實處理以作為所述直播內容。

在一個實施方式中，還包括位于所述數字視聽場所的數字視聽單元中的機頂盒；

所述攝像頭或所述移動終端，還用于錄制所述實物的視頻或圖片，將所述實物的視頻或圖片發送到所述機頂盒；

所述機頂盒與顯示單元連接，用于將所述實物的視頻或圖片發送到顯示單元；

顯示單元，用于顯示所述直播內容及所述實物的視頻或圖片。

在一個實施方式中，所述包廂被布置在數字視聽場所中，所述數字視聽場所包括下列中的至少一個：卡拉OK場所；夜總會；酒吧；酒店；多媒體會議室；網吧；影吧；臺球室；和/或

所述數字視聽單元包括包廂。

從上述技術方案可以看出，在本發明實施方式中，從接收數字視聽場所的數字視聽單元中直播內容的終端接收針對實物的實物訂單信息，基于實物訂單信息生成實物待支付信息，并當終端基于實物待支付信息完成支付后，向數字視聽場所的數字視聽單元分發所述實物。本發明實施方式可以實現在直播過程中贈送真實物品，并由此提高直播的互動性。

本發明實施方式結合攝像頭可以直播虛擬場景模型內容，可以將AR直播引入數字視聽場所。

另外，本發明實施方式還可以提高移動支付的安全性并降低成本，而且還可以實現云端配置，升級維護非常便利。尤其是，當支付管理平臺中的支付服務器的數目為多個時，本發明實施方式的成本效益更加明顯。在本發明實施方式中，當支付平臺發生變更、擴展或升級支付方式時，可以在云端完成相應的配置工作，而不需要下單終端、支付服務器等其他服務端作出任何改動，升級和維護大大簡化。

還有，在本發明實施方式中，可以在云端服務器對各個交易場所的交易敏感數據進行集中管理，既保證了數據安全性，也可以為大數據挖掘提供關鍵依據。

還有，本發明可以采用布置在數字視聽場所的數字視聽單元中的攝像頭作為直播錄制源，克服了手機攝像頭在拍攝過程中容易抖動的缺點，而且克服了手機攝像頭網絡信號不好，容易引起直播卡頓的缺點。

附圖說明

圖1為根據本發明實施方式的直播互動方法流程圖。

圖2為根據本發明實施方式的實物送禮流程圖。

圖3為根據本發明實施方式的直播互動系統的結構圖。

圖4為根據本發明實施方式的直播互動元素示意圖。

圖5為根據本發明實施方式的移動支付系統的示范性結構圖。

圖6為根據本發明實施方式在數字視聽場所的移動支付系統的示范性結構圖。

具體實施方式

為使本發明的目的、技術方案和優點更加清楚，下面結合附圖對本發明作進一步的詳細描述。

為了描述上的簡潔和直觀，下文通過描述若干代表性的實施方式來對本發明的方案進行闡述。實施方式中大量的細節僅用于幫助理解本發明的方案。但是很明顯，本發明的技術方案實現時可以不局限于這些細節。為了避免不必要地模糊了本發明的方案，一些實施方式沒有進行細致地描述，而是僅給出了框架。下文中，“包括”是指“包括但不限于”，“根據……”是指“至少根據……，但不限于僅根據……”。由于漢語的語言習慣，下文中沒有特別指出一個成分的數量時，意味著該成分可以是一個也可以是多個，或可理解為至少一個。

在本發明實施方式中，從接收數字視聽場所的數字視聽單元中直播內容的終端處，接收針對實物的實物訂單信息，基于所述實物訂單信息生成實物待支付信息，并當所述終端基于所述實物待支付信息完成支付后，向所述數字視聽場所的數字視聽單元分發所述實物。

在一個實施方式中，可以將移動終端(比如，手機)與數字視聽場所的數字視聽單元綁定，用戶通過移動終端中的客戶端打開直播功能，在該直播功能中可選擇直播移動終端自帶攝像頭所拍攝的視頻文件，還可以選擇直播包廂中設置的攝像頭所拍攝的視頻文件(該視頻文件可以為虛擬舞臺的視頻)。

在一個實施方式中，用戶還可以基于包廂點歌終端確定直播內容。當直播用戶在包廂點歌終端上選定以布置在數字視聽場所的數字視聽單元中的攝像頭作為直播錄制源時，使能攝像頭錄制直播用戶的視頻，并將直播用戶的視頻作為所述直播內容；或，當直播用戶在所述包廂點歌終端上選定以布置在數字視聽場所的數字視聽單元中的攝像頭作為直播錄制源時，使能攝像頭錄制直播用戶的視頻，并將直播用戶的視頻與預定的虛擬場景模型作出增強現實處理以作為所述直播內容。

在確定直播內容后，將直播內容發到云端服務器的CDM直播通道，并生成觀看直播的路徑。然后，用戶將觀看直播的路徑直接分享給他人，他人通過直播路徑可觀看到直播，或用戶將直播路徑放在客戶端平臺上，他人主動查找該直播路徑進行觀看直播。

直播頁面上可以具有彈幕按鈕、虛擬禮物、虛擬道具或場所線上超市入口。他人可在直播頁面購買送彈幕、虛擬禮物、虛擬道具等。購買后，彈幕按鈕、虛擬禮物、虛擬道具依次通過云端服務器和網關服務器發送到包廂機頂盒，然后機頂盒控制彈幕、虛擬禮物、虛擬道具等顯示到包廂的顯示屏上。當需要送實體物品時，從場所線上超市入口進入場所線上超市，進行購買實體物品，該實物訂單信息(購物信息)中包括包廂信息、被送人的賬戶等，付款后，場所將實體物品送到對應包廂中。

圖1為根據本發明實施方式的直播互動方法的流程圖。在圖1所示流程中，以移動終端為例闡述確定直播內容的方法。本發明實施方式還可以通過包廂點歌終端或其他的終端確定直播內容。而且，在圖1中，將包廂作為數字視聽場所的數字視聽單元的實施例進行說明。

如圖1所示，該方法包括：

步驟101：將移動終端與數字視聽場所的數字視聽單元相綁定。

在這里，移動終端可以通過掃描二維碼的方式與數字視聽場所的數字視聽單元相綁定。比如，在數字視聽場所的數字視聽單元中張貼有二維碼，移動終端的攝像頭掃描二維碼，并與數字視聽場所的數字視聽單元保持綁定。

在這里，數字視聽場所包括卡拉OK場所；夜總會；酒吧；酒店；多媒體會議室；網吧；影吧；臺球室，等等。數字視聽單元包括數字視聽場所中的包廂。

步驟102：基于移動終端確定直播內容，將直播內容發送到云端，以由云端生成直播內容的播放地址。

在這里，當直播用戶在移動終端上選定以移動終端作為直播錄制源時，使能移動終端錄制直播用戶的視頻以作為直播內容。

當直播用戶在移動終端上選定以布置在數字視聽場所的數字視聽單元中的攝像頭作為直播錄制源時，使能攝像頭錄制直播用戶的視頻，并將直播用戶的視頻與預定的虛擬場景模型作出增強現實(AR)處理以作為直播內容。

當直播用戶在移動終端上選定以移動終端及布置在數字視聽場所的數字視聽單元中的攝像頭共同作為直播錄制源時，使能移動終端錄制直播用戶的視頻，使能攝像頭錄制直播用戶的視頻，并將移動終端錄制的視頻、直播用戶的視頻與預定的虛擬場景模型作出增強現實處理以作為直播內容。

當直播用戶在所述移動終端上選定以布置在所述數字視聽場所的數字視聽單元中的攝像頭作為直播錄制源時，使能所述攝像頭錄制所述直播用戶的視頻，并將所述直播用戶的視頻作為所述直播內容；

在其它實施例中，還可通過所述基于包廂點歌終端確定直播內容，具體為：當直播用戶在所述包廂點歌終端上選定以布置在所述數字視聽場所的數字視聽單元中的攝像頭作為直播錄制源時，使能所述攝像頭錄制所述直播用戶的視頻，并將所述直播用戶的視頻作為所述直播內容?；蛘呤牵斨辈ビ脩粼谒霭鼛c歌終端上選定以布置在所述數字視聽場所的數字視聽單元中的攝像頭作為直播錄制源時，使能所述攝像頭錄制所述直播用戶的視頻，并將所述直播用戶的視頻與預定的虛擬場景模型作出增強現實處理以作為所述直播內容。

而且，云端生成直播內容的播放地址之后，可以將直播內容的播放地址發送到移動終端，再由移動終端直接將直播內容的播放地址分享給他人?；蛘?，云端生成直播內容的播放地址之后，可以將直播內容的播放地址發送到移動終端，移動終端將直播內容的播放地址放在客戶端平臺上，他人主動在客戶端平臺上查找直播內容的播放地址進行觀看直播。再或者，云端生成直播內容的播放地址之后，直接將直播內容的播放地址放在客戶端平臺上，他人主動在客戶端平臺上查找直播內容的播放地址進行觀看直播。

步驟103：從基于直播內容的播放地址觀看直播內容的終端接收針對實物的實物訂單信息，基于實物訂單信息生成實物待支付信息，并當終端基于實物待支付信息完成支付后，向數字視聽場所的數字視聽單元分發實物。

在一個實施方式中，終端通過微信連接到直播頁面(比如，通過微信的第五代超文本標記語言頁面觀看直播內容)接收所述直播內容；和/或，終端通過預定的應用程序接收所述直播內容。

在一個實施方式中，實物包括下列中的至少一個：酒類；飲料；零食；鮮花；水果；熟食；玩具；服裝；飾品，等等。本實際操作中，實物并不僅限上述種類，只要可在線上超市購買到的實物均可作為贈送禮物。

舉例，直播用戶張三將移動終端與數字視聽場所的數字視聽單元相綁定。而且，直播用戶張三在移動終端上選定以布置在數字視聽場所的數字視聽單元中的攝像頭作為直播錄制源，攝像頭錄制直播用戶張三的才藝表演視頻，并將直播用戶的才藝表演視頻與預定的虛擬場景模型(比如，舞臺背景)作出增強現實(AR)處理以作為直播內容。攝像頭將直播內容發送到云端，以由云端生成直播內容的播放地址。終端李四通過直播內容的播放地址觀看直播內容，并非常喜歡直播用戶張三的表演內容。李四打算送張三實體禮物以作為獎勵。李四發出針對實物的實物訂單信息，支付平臺基于實物訂單信息生成實物待支付信息，并當李四基于實物待支付信息完成支付后，向數字視聽場所的數字視聽單元中的直播用戶張三分發實物。

以上詳細描述了實物種類以及觀看直播內容的具體實施方式，本領域技術人員可以意識到，這種描述僅是示范性的，并不用于限定本發明的保護范圍。

在一個實施方式中，該方法還包括：錄制實物的視頻或圖片；在數字視聽場所的數字視聽單元中顯示直播內容及實物的視頻或圖片。

在具體實施中，直播用戶可以通過移動終端上的K米App或者微信掃描點歌臺上特定的二維碼，以綁定包廂。直播用戶可以選擇使用包廂內的專業攝像頭或移動終端自帶攝像頭進行直播。使用專業攝像頭直播，可以選擇AR功能，把虛擬舞臺、場景直播出去。當用戶發起直播后，該用戶可以主動通過微信分享直播H5頁面給場外的觀眾。場外的用戶也使用K米App在熱門直播大廳列表找到對應的直播。場外觀眾可以送彈幕、虛擬禮物、虛擬道具、或者實際超市的物品，和直播者互動。直播系統和KTV點歌系統無縫結合的。場外用戶的發送的彈幕、虛擬禮物、實物送禮，在KTV的包廂大電視上都有同步的酷炫展示，如果場外送的是實際超市的禮物，線下的超市系統會自動出品對應的實際禮物，由服務員送給直播者。

本發明實施方式優選還提出了一種融合式虛擬場景互動方法。在一個實施方式中，該方法還包括：將第一對象更新到所述虛擬場景模型中，并在接收到互動指令時，根據互動指令將互動內容更新到所述虛擬場景模型中，以得到所述直播內容；其中第一對象包括：實物或虛擬禮物。

在一個實施方式中，將第一對象更新到所述虛擬場景模型中包括：實時獲取一個以上攝像裝置的信號，采集得到一個以上的第一圖像數據；根據預設的條件，從每個第一圖像數據中提取一個以上的第一對象，將一個以上的第一對象實時更新到虛擬場景中；所述互動內容還包括第一素材的內容數據，所述第一素材包括：文字素材、圖像素材、聲音素材或圖像素材與聲音素材的結合；或，所述虛擬場景模型為3D虛擬舞臺。

可見，本發明實施方式還提供了一種融合式虛擬場景互動的方法，可以應用于網絡直播或MTV制作等多種需求中。該融合式虛擬場景互動的方法，將第一對象更新到虛擬場景中，并在接收到互動指令時，根據互動指令將互動內容更新到虛擬場景中，得到圖像數據。

具體地，融合式虛擬場景互動包括以下步驟：

第一步：實時獲取一個以上攝像裝置的信號，采集得到一個以上的第一圖像數據。

第二步：根據預設的條件，從每個第一圖像數據中提取一個以上的第一對象。在不同的實施例中根據需要，第一對象可以是不同的具體對象，例如第一對象可以是真人主播，可以是寵物動物等，還可以是植物等；第一對象的數量可以是單個，也可以是2個以上。根據這些實際需求的不同，可以使用不同的算法和設置，以有效地在第一數據圖像中提取第一對象。以下通過一具體提取第一對象的算法實施例進行舉例說明。

在某一實施例中，第一圖像數據中，第一對象為人物主播，主播所處的背景為純色背景。提取第一圖像數據中第一對象的具體步驟為：GPU將第一圖像數據中的每個像素的顏色值與預設的閾值做比較；若像素的顏色值在預設的閾值內，則將該像素點的Alpha通道設為零，即將背景顯示為透明色，提取出對象。

由于背景為純色，所以本實施例采用色度鍵法進行摳圖。其中預設的閾值為背景顏色的顏色值，例如，背景顏色為綠色，則預設的像素點RGB顏色值的閾值為(0±10、255-10、0±10)。背景色可以選擇綠色或藍色，在拍攝的場所可同時設置兩種顏色的背景，供主播選擇。當主播穿與綠色反差較大的衣服唱歌時，可選用綠色的背景。在對象(人像)提取過程中，由于主播穿的衣服與背景色相差較大，所以圖像中的每個像素的顏色值與預設的閾值進行比較后，背景部分像素點的顏色值在預設的閾值內，將背景部分像素點的Alpha通道設為零，即將背景顯示為透明色；而人像部分的像素點不在預設的閾值內，保留人像部分，從而實現將人像從圖像中提取出來。

在具體的實施例中，還可以利用設備上的GPU進行摳圖處理操作，不占用CPU時間，提高系統速度；并且由于GPU是專門對圖像進行處理的硬件，對不同大小的像素運算時間一樣，例如，8位、16位、32位的像素運算時間均一樣，可大大節省了對像素的運算時間；而普通的CPU會隨像素大小的增大延長處理時間，所以本實施例的人像提取速度大大提高。上述的區別點使得本實施例中還可以采用帶有GPU的嵌入式設備實現，即使嵌入式方案中的CPU性能較弱，但是應用本實施例的方案，嵌入式設備方案仍然能實現流暢顯示，因為若使用CPU從第一圖像數據中提取第一對象，CPU需進行讀取攝像裝置獲取的視頻，并進行摳圖等處理，CPU負擔太重，無法進行流暢的顯示。而本實施例應用于嵌入式方案中，將上述摳圖處理放入GPU中進行，既減輕了CPU的負擔，同時不會對GPU的運行造成影響。

第三步：接收來自第一終端發送的互動指令。在不同的實施例中，所述第一終端通過計算機網絡發送互動指令，計算機網絡可以是Internet網絡也可以是局域網，可以是由有線網絡、WiFi網絡、3G/4G移動通訊網絡、藍牙網絡或ZigBee網絡等進行連接。第一終端可以是PC，也可以是手機、平板電腦等移動通訊設備，還可以是智能手表、智能手環、智能眼鏡等穿戴式設備。在一些實施例中，第一終端還可以遙控器等近距離控制裝置，第一終端可產生紅外信號、無線電波等信號來發送相應的互動指令。

第四步：將一個以上的第一對象實時更新到虛擬場景中，并根據互動指令，更新或切換虛擬場景，得到第二圖像數據。在實施例中，所述虛擬場景包括計算機模擬的虛擬現實場景或真實拍攝的視頻場景等。更進一步的，實施例還可以結合新近發展的3D圖像技術來提供虛擬場景，例如3D虛擬現實場景或3D視頻場景。

3D虛擬現實場景技術是一種可以創建和體驗虛擬世界的計算機仿真系統，它利用計算機生成一種現實場景的3D模擬場景，是一種多源信息融合的交互式的三維動態視景和實體行為的系統仿真。虛擬場景包括任何現實生活中存在的實際場景，包含視覺、聽覺等任何能通過體感感受到的場景，通過計算機技術來模擬實現。3D虛擬現實場景的一種應用是3D虛擬舞臺，3D虛擬舞臺是通過計算機技術模擬現實舞臺，實現一種立體感、真實感強的舞臺效果?？梢酝ㄟ^3D虛擬舞臺實現，在現實中不在舞臺上的主播對象在各種舞臺上進行表演的場景效果。3D視頻是拍攝影像時，用兩臺攝影機模擬左右兩眼視差，分別拍攝兩條影片，然后將這兩條影片同時放映到銀幕上，放映時讓觀眾左眼只能看到左眼圖像，右眼只能看到右眼圖像。最后兩幅圖像經過大腦疊合后，就能看到具有立體縱深感的畫面，即為3D視頻。

在不同虛擬場景中互動的實施例中，互動指令可以包括不同的內容，在某些實施例中，所述互動指令包括將第一素材更新到虛擬場景中的命令。具體為：在將第一對象實時更新到虛擬場景的同時，根據所述互動指令，將第一素材也更新到虛擬場景中，從而得到所述第二圖像數據。第一素材可以為圖像素材、聲音素材或者圖像素材與聲音素材的結合。以網絡直播為例，所述第一素材包括有虛擬禮物、點贊、背景音、喝彩等，網絡直播的觀眾可通過移動手機，向主播送鮮花等虛擬禮物的互動指令，所送的禮物將以鮮花圖片的形式在虛擬場景中體現出來。網絡直播的觀眾還可以通過移動手機，向主播發送鼓掌的互動指令，鼓掌的互動指令將以掌聲的形式進行播放。第一素材可以是系統預置的，供給用戶選擇使用，而在某些實施例中，所述互動指令除了包括將第一素材更新到虛擬場景中的命令，還可包括了第一素材的內容數據。例如觀眾在通過移動終端上傳一個贈送虛擬禮物的互動指令，以及在互動指令中還包含了一張所贈送虛擬禮物的圖片，在接收到所述互動指令后，將所述禮物的圖片更新至虛擬場景中。因此觀眾在發送互動指令時，除了可以選擇互動的方式，還可以根據自己的喜好自定義第一素材的內容數據，如喜歡的圖片素材、聲音素材或圖片與聲音結合的素材。

在一些實施例中，互動指令還包括變換虛擬場景鏡頭的命令，所述變換虛擬場景鏡頭的命令包括有切換虛擬場景鏡頭的視角，改變虛擬場景鏡頭焦距以及對虛擬場景進行局部模糊處理等。通過切換虛擬場景鏡頭的視角，可以模擬從不同視角觀看虛擬場景的畫面；通過改變虛擬場景鏡頭焦距，可對拉近和推遠虛擬場景的畫面；而對對虛擬場景進行局部模糊處理，可使虛擬場景中未模糊處理部分畫面被突出顯示。通過所述變換虛擬場景鏡頭的命令，可大大提高觀眾的互動程度和趣味性。

區別于現有的直播互動，是將互動的內容是直接的疊加至圖像或視頻的表面層，因此在視覺效果上，所疊加的互動內容像是漂浮在虛擬場景的表面，從而導致互動內容的視覺效果很突兀，很難與虛擬場景融合成一體。在上述實施例中，所述互動內容是在第一對象更新至虛擬場景的同時，更新至虛擬場景中，其中，所述第一對象、互動內容以及虛擬場景是一同渲染成像的，因此互動內容與第一對象可以自然、協調的融合在虛擬場景中，從而具有良好的視覺效果。在實施例中，所述互動內容還可是通過3D建模而得到的3D互動模型，3D互動模型與第一對象以及虛擬場景實時渲染，從而得到3D互動模型在虛擬場景中自然展現，如互動內容為獻花時，所獻的鮮花可在虛擬場景中立體展現；如互動內容為點贊時，點贊的信息能夠在虛擬場景中的虛擬屏幕上顯示。例如，當虛擬場景為一個舞臺中，互動內容為獻花，采用本發明上述方法，所獻的鮮花可展示在舞臺當中，成為舞臺的一部分，顯示效果好，而不像現有技術只是漂浮在界面表面。

在一實施例中，在實時獲取攝像裝置的信號，采集得到第一圖像數據的同時，實時獲取傳聲器的信號，采集得到第一聲音數據；

將第一對象實時更新到虛擬場景中的同時，也將將第一聲音實時更新到虛擬場景中，得到第二圖像數據。以網絡直播為例，所述第一聲音數據為網絡主播的說明或演唱的聲音，或演主播演唱的聲音及歌曲伴奏的混合聲音。通過實時將第一聲音實時更新到虛擬場景中，同時，在顯示終端實時顯示更新后的第二圖像數據。這樣，不僅可聽到網絡主播的聲音，還可以在顯示終端看到與聲音同步的畫面(人像與虛擬場景的結合)，實現了虛擬舞臺的效果。

在上述實施例中，得到第二圖像數據之后，將第二圖像數據通過顯示裝置顯示，通過在顯示裝置上顯示所述第二圖像數據，用戶可看到第一對象與虛擬場景合成后的視頻。在顯示第二圖像數據時，可先對第二圖像數據的畫面進行編碼，通過編碼處理可使圖像數據在顯示裝置實時流暢顯示。在現有技術中，一般不對原始畫面進行處理，原始畫面數據量大，所以現有技術還未出現對人像和虛擬場景合成后的畫面，實時在客戶端顯示的技術。而本實施例將更新后得到的第二圖像數據的畫面先進行編碼，經過編碼操作可大大減小畫面大小。

例如：在分辨率為720P的情況下，1幀視頻的大小為1.31MByte，1秒視頻為30幀畫面，所以，現有視頻中，1秒視頻的大小為：30*1.31＝39.3MByte；本實施例對畫面進行編碼后，還是在分辨率為720P下，設碼率為4Mbit，1秒的視頻的大小為4Mbit，由于1Byte＝8bit，所以1秒的視頻為0.5MByte；與現有視頻相比，編碼后的視頻數據大大減小，從而編碼后的視頻數據可流暢地在網絡上進行傳輸，實現在客戶端流暢顯示音視頻數據。

在一些實施例中，得到第二圖像數據之后，存儲記錄第二圖像數據。所存儲的第二圖像數據可上傳至網關服務器，網關服務器將接收的圖像數據上傳至云端服務器，云端服務器接收圖像數據并生成分享地址。通過上述步驟，實現了第二圖像數據的分享。在通過終端設備(例如手機、電腦、平板等帶顯示屏的電子設備)登錄分享地址，即可直接播放音視頻數據或下載所述第二圖像數據。

所得到的第二圖像數據除了可以在本地的顯示裝置上進行播放，還可以在網絡端進行實時播放。具體為：

網絡客戶端通過實時流傳輸協議獲取所述第二圖像數據，并對第二圖像數據中的視頻數據解碼顯示畫面，所述畫面內容可為3D場景渲染的畫面；音頻數據解碼后通過音頻播放設備(例如揚聲器)播放。所述實時流傳輸協議可以是RTSP協議。其中，第二圖像數據中的圖像數據預先經過編碼操作，通過圖像數據編碼操作，可實現客戶端流暢播放視頻數據。

以上詳細描述了融合式虛擬場景互動的實現細節。本領域技術人員可以意識到，也可以不采用上述互動方式或采用其他的互動方式，本發明對此并無限定。

下面再詳細描述本發明實施方式的實物送禮流程。

圖2為根據本發明實施方式的實物送禮流程圖。

如圖2所示，該方法包括：

步驟201：場外觀看直播用戶A使用App或者微信H5頁面觀看直播。

步驟202：場外觀看直播用戶A選擇實物物品和送禮對象。

步驟203：場外觀看直播用戶A通過微信或支付寶等支付方式實現支付。

步驟204：支付成功后，場所的超市管理系統出品物品。

步驟205：手機App或者H5接口通知點歌系統在電視展示實物付成功后，場所的超市管理系統出品物品。

步驟206：獲贈者收到服務員送來的超市出品的實物禮品。

因此，在本發明實施方式中，在直播過程能方便快捷的利用送實物來增加互動，不僅僅局限于虛擬的道具和禮物，同時本發明結合專業攝像頭，把AR內容直播出去，可以將直播引入KTV場所，開創KTV直播時代。

本發明實施方式還提出了一種直播互動系統。包括：云端服務器，用于基于數字視聽場所的數字視聽單元中直播內容生成播放地址；支付平臺，用于從基于所述播放地址觀看直播內容的終端接收針對實物的實物訂單信息，基于所述實物訂單信息生成實物待支付信息，并當所述終端基于所述實物待支付信息完成支付后，向數字視聽場所的數字視聽單元分發實物。

在一個實施方式中，直播互動系統還包括：

移動終端，用于當直播用戶在所述移動終端上選定以所述移動終端作為直播錄制源時，錄制所述直播用戶的視頻以作為直播內容或將所述直播用戶的視頻與預定的虛擬場景模型作出增強現實處理以作為所述直播內容，將所述直播內容發送到云端服務器；

布置在所述數字視聽場所的數字視聽單元中的攝像頭，用于當直播用戶在所述移動終端上選定以所述攝像頭作為直播錄制源時，錄制所述直播用戶的視頻以作為直播內容，或將所述直播用戶的視頻與預定的虛擬場景模型作出增強現實處理以作為直播內容，將所述直播內容發送到云端服務器；

包廂點歌終端，用于當直播用戶在所述包廂點歌終端上選定以所述攝像頭作為直播錄制源時，使能所述攝像頭錄制所述直播用戶的視頻并將所述直播用戶的視頻作為所述直播內容，或將所述直播用戶的視頻與預定的虛擬場景模型作出增強現實處理以作為所述直播內容。

圖3為根據本發明實施方式的直播互動系統的結構圖。

如圖3所示，直播互動系統包括：

移動終端，用于與數字視聽場所的數字視聽單元相綁定，當直播用戶在移動終端上選定以移動終端作為直播錄制源時，錄制直播用戶的視頻以作為直播內容，將直播內容發送到云端服務器；

布置在數字視聽場所的數字視聽單元中的攝像頭，用于當直播用戶在移動終端上選定以攝像頭作為直播錄制源時，錄制直播用戶的視頻，并將直播用戶的視頻與預定的虛擬場景模型作出增強現實處理以作為直播內容，將直播內容發送到云端服務器；

云端服務器，用于基于移動終端或攝像頭提供的直播內容生成直播內容的播放地址；

支付平臺，用于從基于直播內容的播放地址觀看直播內容的終端接收針對實物的實物訂單信息，基于實物訂單信息生成實物待支付信息，并當終端基于實物待支付信息完成支付后，向數字視聽場所的數字視聽單元分發實物。

在一個實施方式中，直播互動系統還包括位于數字視聽場所的數字視聽單元中的機頂盒；

攝像頭或移動終端，還用于錄制實物的視頻或圖片，將實物的視頻或圖片發送到機頂盒；機頂盒與顯示單元連接，用于將實物的視頻或圖片發送到顯示單元；顯示單元，用于顯示直播內容及實物的視頻或圖片。

在一個實施方式中，包廂被布置在數字視聽場所中，所述數字視聽場所包括下列中的至少一個：卡拉OK場所；夜總會；酒吧；酒店；多媒體會議室；網吧；影吧；臺球室，等等。

圖4為根據本發明實施方式的直播互動元素示意圖。在直播過程中，既可以顯示用戶進入和退出直播頻道的狀態，還可以顯示虛擬禮物送禮和實物送禮的過程。

除了上述直播互動之外，本發明實施方式還結合披露了一種移動支付方法。

移動支付(Mobile Payment)，也稱之為手機支付，是指交易雙方為了某種貨物或者服務，使用移動終端設備為載體，通過移動通信網絡實現的商業交易。移動支付所使用的移動終端可以是手機、個人數字助理(PDA)、移動個人電腦(PC)等。移動支付目前廣泛地應用在各行各業中。在買單之后支付時，用戶可以通過現金、刷卡支付或第三方平臺支付等方式進行結賬操作。在支付過程中，通常需要支付終端(比如，諸如刷卡器之類的刷卡終端)與互聯網具有穩定連接。如果支付服務器不能正常連接網絡，就無法完成支付。然而，當支付服務器較多時，每個支付服務器都連接互聯網會導致成本問題。而且，大量支付同時結算時，多個支付服務器對網絡的負載以及帶寬帶來不小的壓力，甚至有可能因為網絡堵塞導致支付超時。另外，直接將支付服務器暴露在互聯網中，還可能導致安全風險問題。

目前，數字視聽場所的移動支付主要有兩種方式：方式(1)、移動終端通過互聯網直接購買網絡平臺上的產品，移動終端直接到第三方的支付平臺上進行支付。在方式(1)中，數字視聽場所無法得到用戶的消費資料，無法進行大數據分析等操作。方式(2)、移動終端直接支付到數字視聽場所中的支付管理平臺，支付管理平臺再與第三方的支付平臺對接。然而，當出現新的支付方式后，支付管理平臺必須進行更新。由于支付管理平臺設置在場所中，所以每次支付方式增加或變更后，場所中的支付管理平臺都必須進行對應操作，極其不方便。

鑒于現有技術中支付服務器需要直接連接互聯網才能實現移動支付的缺陷，本發明實施方式提出一種新穎的移動支付方式。支付管理平臺無需與互聯網直接連接即可實現移動支付，從而提高移動支付的安全性并降低成本。本發明實施方式提出的移動支付系統，包括：支付管理平臺、網關服務器、云端服務器和支付平臺，其中支付管理平臺布置在局域網中；支付管理平臺，用于經由局域網接收訂單信息，經由局域網將訂單信息發送到網關服務器；網關服務器，用于經由互聯網將訂單信息發送到云端服務器；云端服務器，用于經由互聯網將訂單信息發送到支付平臺；支付平臺，用于生成基于訂單信息生成待支付信息，并經由互聯網發送待支付信息到云端服務器；云端服務器，還用于經由互聯網將待支付信息發送到網關服務器；網關服務器，還用于經由局域網向支付管理平臺發送待支付信息；支付管理平臺，還用于展示待支付信息，以由用戶基于待支付信息執行支付。優選地，支付管理平臺包括下單終端、機頂盒和/或支付服務器。

相應地，圖1所示的直播互動方法還包括：

經由與數字視聽場所的數字視聽單元中的機頂盒在同一局域網中的支付管理平臺，從與所述數字視聽場所的數字視聽單元相綁定的移動終端接收訂單信息；

經由所述支付管理平臺通過局域網將所述訂單信息發送到網關服務器，以由所述網關服務器經由互聯網將所述訂單信息發送到云端服務器，并由云端服務器經由互聯網將所述訂單信息發送到支付平臺；

經由所述支付管理平臺通過局域網從網關服務器接收待支付信息，所述待支付信息由支付平臺基于訂單信息生成、并經由互聯網發送到云端服務器，再由云端服務器經由互聯網發送到網關服務器；

展示所述待支付信息，以由移動終端基于所述待支付信息執行支付。

在一個實施方式中，圖1所示的直播互動方法還包括：

支付平臺經由互聯網向云端服務器返回支付結果；

云端服務器經由互聯網將支付結果發送到網關服務器；

網關服務器經由局域網向支付管理平臺發送支付結果。

在一個實施方式中，圖1所示的直播互動方法還包括：

當增加新的支付平臺時，云端服務器進一步建立與新的支付平臺的互聯網連接；云端服務器基于預定策略選擇目標支付平臺，并將所述訂單信息發送到所述目標支付平臺；或

當所述支付平臺被替換為另外的支付平臺時，云端服務器進一步建立與所述另外的支付平臺的互聯網連接；云端服務器經由互聯網將所述訂單信息發送到所述另外的支付平臺；或

當支付平臺被刪除時，云端服務器刪除與所述支付平臺的互聯網連接。

在一個實施方式中，經由局域網中的支付管理平臺接收訂單信息包括：

經由所述局域網從所述機頂盒接收訂單信息；其中：所述訂單信息是由用戶在移動終端觸發，并由移動終端經由所述局域網發送到機頂盒的；或，經由所述局域網從支付服務器接收訂單信息；其中：所述訂單信息是由管理人員在支付服務器上觸發的。

在一個實施方式中，圖1所示的直播互動方法還包括支付服務器的數目為一或多個；和/或，所述待支付信息包括具有二維碼形式或條形碼形式的支付碼，或銀行類的支付鏈接。

圖5為根據本發明實施方式的移動支付系統的示范性結構圖。

如圖5所示，該系統包括：下單終端501、支付服務器502、網關服務器503、云端服務器504和支付平臺505；其中下單終端501、支付服務器502和網關服務器503布置在同一個局域網中，該局域網布置在移動支付場所中。下單終端501和支付服務器502溝通構成支付管理平臺。

下單終端501的數目可以為多個，多個用戶可以在各自的下單終端501上分別生成各自的訂單信息。

在一個實施方式中，一或多個下單終端501對應于一個支付服務器502。類似地，支付服務器502的數目也可以為多個，而且一或多個支付服務器102對應于一個網關服務器503。

具體地：

下單終端501，用于經由局域網向對應的支付服務器502發送訂單信息；

支付服務器502，用于經由局域網從下單終端501接收訂單信息，經由局域網將訂單信息發送到網關服務器503；

網關服務器503，用于經由互聯網將訂單信息發送到云端服務器504；

云端服務器504，用于經由互聯網將訂單信息504發送到支付平臺505；

支付平臺505，用于基于訂單信息生成待支付信息，并經由互聯網發送待支付信息到云端服務器504；

云端服務器504，還用于經由互聯網將待支付信息發送到網關服務器503；

網關服務器503，還用于經由局域網向之前轉發來訂單信息的支付服務器502發送待支付信息；

支付服務器502，還用于展示待支付信息，以由用戶基于待支付信息執行支付。

具體地，下單終端501生成的訂單信息可以包含交易時間、訂購商品名稱、訂購商品數，等等。訂單信息中還可以進一步攜帶場所名稱、場所編碼、包廂名稱、包廂ID、網關服務器等商家信息。在一個實施方式中，待支付信息可以實施為支付碼或銀行類的支付鏈接。用戶通過手持的移動終端掃描支付碼以確認訂單，并執行支付，或點擊觸發銀行類的支付鏈接以確認訂單并執行支付。而且，支付平臺505可以為商家自行開發的支付平臺，或者為任意的第三方支付平臺，比如支付寶支付平臺、微信支付平臺、銀聯支付平臺，等等。

可見，在圖5所述的系統架構中，支付服務器基于局域網獲取訂單信息，并通過網關服務器從云端獲取待支付信息。支付服務器不再需要具有互聯網聯網能力，從而降低了硬件成本。尤其是，當支付服務器的數目為多個時，本發明實施方式的成本效益更加明顯。

另外，在本發明實施方式中，支付服務器不再暴露在互聯網中，因此可以規避各種安全風險問題。

而且，在本發明實施方式中，可以在云端服務器對各個交易場所的交易敏感數據進行集中管理，既保證了數據安全性，也可以為大數據挖掘提供關鍵依據。

下面將本發明實施方式具體實施到數字視聽場所，示范性詳細闡述本發明實施方式。基于本發明實施方式，數字視聽場所中的支付服務器(比如，收銀服務器)在不能聯網的情況下也可以完成支付。

圖6為根據本發明實施方式在數字視聽場所的移動支付系統的示范性結構圖。

由圖6可見，在數字視聽場所的局域網中，布置有數字視聽終端601、機頂盒602、網關服務器603和支付服務器604。網關服務器603與云端服務器604具有互聯網連接，云端服務器604與支付平臺605連接。

比如，數字視聽終端601可以為實施為數字視聽數字視聽場所的數字視聽單元內的點歌屏，等等。用戶在數字視聽終端601下單后，機頂盒602基于局域網連接，從數字視聽終端601接收訂單請求，而且將場所名稱、場所編碼、包廂名稱、包廂ID、網關服務器編號等商家信息與訂單信息進行對應關聯并封裝，再將封裝后的訂單信息基于局域網發送到支付服務器604。支付服務器604接收訂單信息，并基于局域網將訂單信息發送到網關服務器603。網關服務器603通過互聯網將訂單信息發送到云端服務器604，云端服務器604接收到訂單信息后，對封裝后的訂單信息進行解封裝，而且通過互聯網將解封裝后的訂單信息發送給對應的支付平臺605。支付平臺605通過互聯網向云端服務器604返回對應于訂單信息的支付碼，云端服務器604對支付碼進行封裝，并基于互聯網將支付碼發送給網關服務器603。網關服務603器基于局域網將支付碼推送給支付服務器604。用戶通過移動終端606對支付服務器604上展示的支付碼進行支付。支付完成后，支付結果將由對應的支付平臺605返回給云端服務器304，云端服務器604再傳輸支付結果給網關服務器603和用戶的移動終端606，網關服務器603再將支付結果發送給支付服務器604，完成整個支付過程。

當支付平臺605發生變更時，通過變更云端服務器的支付平臺接口即可實現變更，而無需對支付服務器604或網關服務器603作出變更，因此配置工作較為簡單。

而且，當用戶A通過移動終端606選擇發動直播時，移動終端606錄制用戶A的才藝表演視頻，并將直播內容發送到云端服務器604。云端服務器604生成直播內容的播放地址。支付終端607上的終端B通過直播內容的播放地址觀看直播內容，并非常喜歡直播用戶A的表演內容。用戶B打算送張三實體禮物以作為獎勵。用戶B發出針對實物的實物訂單信息，支付平臺605基于實物訂單信息生成實物待支付信息，并當用戶B基于實物待支付信息完成支付后，向數字視聽場所的數字視聽單元中的移動終端606的用戶A分發實物。

以上以數字視聽場所為例對發明實施方式進行描述，本領域技術人員可以意識到，這種描述僅是示范性的，并不用于限定本發明實施方式的保護范圍。

綜上所述，在本發明實施方式中，將移動終端與數字視聽場所的數字視聽單元相綁定；基于移動終端確定直播內容，將直播內容發送到云端，以由云端生成直播內容的播放地址；從基于直播內容的播放地址觀看直播內容的終端接收針對實物的實物訂單信息，基于實物訂單信息生成實物待支付信息，并當終端基于實物待支付信息完成支付后，向數字視聽場所的數字視聽單元分發所述實物。本發明實施方式可以實現贈送真實物品，并由此提高互動性。

本發明實施方式結合攝像頭可以直播AR內容，可以將AR直逼播引入KTV場所。

另外，本發明實施方式還可以提高移動支付的安全性并降低成本，而且還可以實現云端配置，升級維護非常便利。尤其是，當支付管理平臺中的支付服務器的數目為多個時，本發明實施方式的成本效益更加明顯。在本發明實施方式中，當支付平臺發生變更、擴展或升級支付方式時，可以在云端完成相應的配置工作，而不需要下單終端、支付服務器等其他服務端作出任何改動，升級和維護大大簡化。

還有，在本發明實施方式中，可以在云端服務器對各個交易場所的交易敏感數據進行集中管理，既保證了數據安全性，也可以為大數據挖掘提供關鍵依據。

還有，本發明可以采用布置在數字視聽場所的數字視聽單元中的攝像頭作為直播錄制源，克服了手機攝像頭在拍攝過程中容易抖動的缺點，而且克服了手機攝像頭網絡信號不好，容易引起直播卡頓的缺點。

以上所述，僅為本發明的較佳實施例而已，并非用于限定本發明的保護范圍。凡在本發明的精神和原則之內，所作的任何修改、等同替換、改進等，均應包含在本發明的保護范圍之內。