麻豆精品无码国产在线播放,国产亚洲精品成人AA片新蒲金,国模无码大尺度一区二区三区,神马免费午夜福利剧场

增強演奏場景合成控制方法及裝置與流程

文檔序號:11153831閱讀:來源:國知局

技術特征:

1.一種增強演奏場景合成控制方法,其特征在于,包括下列步驟:

添加預定的虛擬樂器的對應圖像到從攝像單元獲取且將被推送到直播間的音視頻流中;

從該音視頻流中的圖像流中識別出作用于該虛擬樂器的演奏控制部位的用戶手勢,伴隨該用戶手勢在該音視頻流的圖像流中改變所述演奏控制部位的控制狀態,且調用與該虛擬樂器相對應的音頻配置信息,生成插入到該音視頻流中的與該演奏控制部位的控制狀態相適應的音頻流;

將包含有所述圖像流和所述音頻流的合成音視頻流推送到所述的直播間。

2.根據權利要求1所述的增強演奏場景合成控制方法,其特征在于,所述伴隨該用戶手勢在該音視頻流的圖像流中改變所述演奏控制部位的控制狀態的步驟具體包括:

檢測到所述用戶手勢的幀信息滿足據以判定所述演奏控制部位的控制變化的參考信息,以預定時間間隔連續記錄所述用戶手勢的幀信息并得到累積幀數;

當所述累積幀數達到預定幀數,確定所述用戶手勢對應的所述演奏控制部位的控制變化;

響應于所述控制變化,改變所述演奏控制部位的控制狀態。

3.根據權利要求1所述的增強演奏場景合成控制方法,其特征在于,添加預定的虛擬樂器的對應圖像到從攝像單元獲取且將被推送到直播間的音視頻流中的步驟包括:

確定被用戶選擇的預定的虛擬樂器的樂器類型,獲取與所述樂器類型相對應的配置文件;

調取所述配置文件中所指定的虛擬樂器的對應圖像;

通過特定圖像合成算法將所述對應圖像合并到所述直播間的音視頻流中。

4.根據權利要求1所述的增強演奏場景合成控制方法,其特征在于,所述直播間的音視頻流中包括演奏者三維圖像和預設直播間場景圖像,所述演奏者三維圖像獲取自計算機形成的三維模型,該三維模型包括由實景影像經計算機計算形成的使用者三維虛擬形象,或

由計算機三維動畫形成的動畫形象。

5.根據權利要求1所述的增強演奏場景合成控制方法,其特征在于,將包含有所述圖像流和所述音頻流的合成音視頻流推送到所述的直播間的步驟還包括,將所述合成音視頻流通過預定壓縮編碼算法進行壓縮編碼,再推送到所述直播間。

6.根據權利要求1所述的增強演奏場景合成控制方法,其特征在于,從該音視頻流中的圖像流中識別出作用于該虛擬樂器的演奏控制部位的用戶手勢的步驟具體為:

獲取所述圖像流中的演奏者三維圖像,分割出其中人手部分的三維圖像數據信息;

利用預定算法檢測出所述人手部分的三維圖像數據信息中的手指信息數據,并形成手指運動軌跡的信息數據;

將所述手指運動軌跡的信息數據與所述演奏控制部位的信息數據進行數學合并,據以實現識別出作用于該虛擬樂器的演奏控制部位的用戶手勢。

7.根據權利要求1所述的增強演奏場景合成控制方法,其特征在于,所述將包含有所述圖像流和所述音頻流的合成音視頻流推送到所述的直播間的步驟之前還包括,將所述合成音視頻流中的視頻流投射到支持虛擬現實技術的視頻顯示單元,據以對所述合成音視頻流中的視頻流進行三維視角顯示,同時將合成音視頻流中的音頻流推送到音頻播放單元以進行音頻播放。

8.一種增強演奏場景合成控制裝置,其特征在于,包括:

圖像合并模塊,用于添加預定的虛擬樂器的對應圖像到從攝像單元獲取且將被推送到直播間的音視頻流中;

音視頻融合模塊,用于從該音視頻流中的圖像流中識別出作用于該虛擬樂器的演奏控制部位的用戶手勢,伴隨該用戶手勢在該音視頻流的圖像流中改變所述演奏控制部位的控制狀態,且調用與該虛擬樂器相對應的音頻配置信息,生成插入到該音視頻流中的與該演奏控制部位的控制狀態相適應的音頻流;

輸出模塊,用于將包含有所述圖像流和所述音頻流的最終音視頻流推送到所述的直播間。

9.根據權利要求8所述的增強演奏場景合成控制裝置,其特征在于,所述音視頻融合模塊包括:

檢測單元,用于檢測到所述用戶手勢的幀信息滿足據以判定所述演奏控制部位的控制變化的預設幀信息,以預定時間間隔連續記錄所述用戶手勢的幀信息并得到累積幀數;

識別單元,用于當所述累積幀數達到預定幀數,確定所述用戶手勢對應的所述演奏控制部位的控制變化;

執行單元,用于響應于所述控制變化,改變所述演奏控制部位的控制狀態。

10.根據權利要求8所述的增強演奏場景合成控制裝置,其特征在于,所述輸出模塊還包括:

預覽單元,用于將所述合成音視頻流中的視頻流投射到支持虛擬現實技術的視頻顯示單元,據以對所述合成音視頻流中的視頻流進行三維視角顯示,同時將合成音視頻流中的音頻流推送到音頻播放單元以進行音頻播放。

當前第2頁1 2 3 
網友詢問留言 已有0條留言
  • 還沒有人留言評論。精彩留言會獲得點贊!
1
主站蜘蛛池模板: 通化县| 孟津县| 三台县| 顺义区| 商丘市| 防城港市| 宿迁市| 无为县| 梓潼县| 会泽县| 凭祥市| 祁东县| 兰溪市| 珠海市| 酉阳| 竹山县| 年辖:市辖区| 会昌县| 临颍县| 呼伦贝尔市| 平山县| 普兰县| 崇仁县| 永善县| 广丰县| 海口市| 泰和县| 正阳县| 留坝县| 应城市| 个旧市| 丘北县| 开原市| 武穴市| 吐鲁番市| 油尖旺区| 民勤县| 灵璧县| 松阳县| 大渡口区| 无极县|