本發(fā)明涉及增強(qiáng)現(xiàn)實(shí),具體而言,涉及一種圖像顯示方法、裝置及電子設(shè)備。
背景技術(shù):
1、在增強(qiáng)現(xiàn)實(shí)(augmented?reality,簡(jiǎn)稱“ar”)技術(shù)中,ar眼鏡作為一種新興的智能穿戴設(shè)備,可以通過疊加虛擬信息和現(xiàn)實(shí)世界場(chǎng)景,為用戶提供豐富的交互體驗(yàn)。ar眼鏡通常配置有攝像頭,用戶在佩戴ar眼鏡時(shí),可以隨時(shí)通過攝像頭進(jìn)行拍照或拍攝視頻。相關(guān)技術(shù)中,用戶通常在ar眼鏡拍攝照片或視頻后,基于需求通過圖片處理軟件對(duì)拍攝到的照片或視頻進(jìn)行圖像處理。該方式中,用戶的操作較為復(fù)雜,使用戶對(duì)ar眼鏡的使用體驗(yàn)較差。
技術(shù)實(shí)現(xiàn)思路
1、有鑒于此,本發(fā)明的目的在于提供一種圖像顯示方法、裝置及電子設(shè)備,以使用戶可以實(shí)時(shí)對(duì)增強(qiáng)現(xiàn)實(shí)可穿戴設(shè)備拍攝的圖像或視頻進(jìn)行圖像處理,并通過圖像現(xiàn)實(shí)裝置可以實(shí)時(shí)查看當(dāng)前場(chǎng)景與特效的融合效果,提高用戶對(duì)增強(qiáng)現(xiàn)實(shí)可穿戴設(shè)備的使用體驗(yàn)。
2、第一方面,本發(fā)明實(shí)施例提供了一種圖像顯示方法,該方法應(yīng)用于增強(qiáng)現(xiàn)實(shí)可穿戴設(shè)備的控制器;增強(qiáng)現(xiàn)實(shí)可穿戴設(shè)備還包括與控制器連接的圖像顯示裝置;該方法包括:響應(yīng)于針對(duì)當(dāng)前場(chǎng)景的特效添加指令,確定目標(biāo)特效;基于目標(biāo)特效,生成圖像顯示數(shù)據(jù);控制圖像顯示裝置生成特效顯示圖層,基于圖像顯示數(shù)據(jù)在特效顯示圖層進(jìn)行圖像顯示。
3、進(jìn)一步的,上述增強(qiáng)現(xiàn)實(shí)可穿戴設(shè)備還包括音頻采集裝置;響應(yīng)于針對(duì)當(dāng)前場(chǎng)景的特效添加指令,確定目標(biāo)特效的步驟,包括:響應(yīng)于音頻采集裝置接收到音頻數(shù)據(jù),對(duì)音頻數(shù)據(jù)進(jìn)行語(yǔ)音識(shí)別處理;基于識(shí)別結(jié)果,確定目標(biāo)特效。
4、進(jìn)一步的,上述控制圖像顯示裝置生成特效顯示圖層,基于圖像顯示數(shù)據(jù)在特效顯示圖層進(jìn)行圖像顯示的步驟,包括:控制圖像顯示裝置在圖像顯示裝置形成的波導(dǎo)顯示區(qū)域生成新增圖層,基于圖像顯示數(shù)據(jù)對(duì)新增圖層進(jìn)行渲染,顯示渲染后的圖像。
5、進(jìn)一步的,上述增強(qiáng)現(xiàn)實(shí)可穿戴設(shè)備還包括與控制器連接的圖像采集裝置;基于目標(biāo)特效,生成圖像顯示數(shù)據(jù)的步驟,包括:控制圖像采集裝置對(duì)當(dāng)前場(chǎng)景進(jìn)行拍攝,生成初始圖像;基于目標(biāo)特效對(duì)應(yīng)的圖像處理方式對(duì)初始圖像進(jìn)行圖像處理,生成目標(biāo)圖像;基于目標(biāo)圖像及初始圖像,確定圖像顯示數(shù)據(jù)。
6、進(jìn)一步的,上述方法還包括:確定初始圖像中的多個(gè)圖像區(qū)域,從多個(gè)圖像區(qū)域中確定目標(biāo)區(qū)域;基于目標(biāo)特效對(duì)應(yīng)的圖像處理方式對(duì)初始圖像進(jìn)行圖像處理,生成目標(biāo)圖像的步驟,包括:基于目標(biāo)特效對(duì)應(yīng)的圖像處理方式及目標(biāo)區(qū)域,對(duì)初始圖像進(jìn)行圖像處理。
7、進(jìn)一步的,上述確定初始圖像中的多個(gè)圖像區(qū)域的步驟,包括:將初始圖像轉(zhuǎn)化為灰度圖像,對(duì)灰度圖像進(jìn)行輪廓識(shí)別處理,得到至少一個(gè)輪廓;基于至少一個(gè)輪廓,確定初始圖像中的多個(gè)圖像區(qū)域。
8、進(jìn)一步的,上述從多個(gè)圖像區(qū)域中確定目標(biāo)區(qū)域的步驟,包括:響應(yīng)于區(qū)域選擇指令,基于區(qū)域選擇指令的指令內(nèi)容,從多個(gè)圖像區(qū)域中確定目標(biāo)區(qū)域;區(qū)域選擇指令基于語(yǔ)音數(shù)據(jù)或手勢(shì)數(shù)據(jù)產(chǎn)生。
9、進(jìn)一步的,上述基于目標(biāo)特效對(duì)應(yīng)的圖像處理方式及目標(biāo)區(qū)域,對(duì)初始圖像進(jìn)行圖像處理的步驟,包括:基于目標(biāo)特效及目標(biāo)區(qū)域,確定初始圖像中的待處理區(qū)域;待處理區(qū)域包括目標(biāo)區(qū)域和\或目標(biāo)區(qū)域的相鄰區(qū)域;基于目標(biāo)特效對(duì)應(yīng)的圖像處理方式,對(duì)待處理區(qū)域進(jìn)行圖像處理。
10、進(jìn)一步的,上述控制器包括主控單元及神經(jīng)網(wǎng)絡(luò)處理單元;基于目標(biāo)特效對(duì)應(yīng)的圖像處理方式對(duì)初始圖像進(jìn)行圖像處理,生成目標(biāo)圖像的步驟,包括:通過主控單元將初始圖像發(fā)送至神經(jīng)網(wǎng)絡(luò)處理單元;通過神經(jīng)網(wǎng)絡(luò)處理單元將初始圖像輸入至預(yù)先訓(xùn)練的圖像處理模型,通過圖像處理模型基于目標(biāo)特效對(duì)應(yīng)的圖像處理方式對(duì)初始圖像進(jìn)行處理,輸出目標(biāo)圖像。
11、進(jìn)一步的,上述基于目標(biāo)圖像及初始圖像,確定圖像顯示數(shù)據(jù)的步驟,包括:針對(duì)目標(biāo)圖像中的第一像素與初始圖像中與第一像素對(duì)應(yīng)的第二像素,確定第一像素的像素值與第二像素的像素值之間的差值;基于差值,生成圖像顯示數(shù)據(jù)。
12、進(jìn)一步的,上述方法還包括:響應(yīng)于特效更新指令,更新目標(biāo)特效;基于更新后的目標(biāo)特效,更新圖像顯示數(shù)據(jù);控制圖像顯示裝置基于更新后的圖像顯示數(shù)據(jù)在特效顯示圖層進(jìn)行圖像顯示。
13、進(jìn)一步的,上述控制圖像顯示裝置生成特效顯示圖層,基于圖像顯示數(shù)據(jù)在特效顯示圖層進(jìn)行圖像顯示之后,上述方法還包括:響應(yīng)于圖像確認(rèn)指令,保存目標(biāo)圖像。
14、進(jìn)一步的,上述控制圖像采集裝置對(duì)當(dāng)前場(chǎng)景進(jìn)行拍攝,生成初始圖像的步驟,包括:響應(yīng)于視頻拍攝指令,控制圖像采集裝置按照預(yù)設(shè)頻率對(duì)當(dāng)前場(chǎng)景進(jìn)行拍攝,生成視頻幀序列;將視頻幀序列中的第一個(gè)視頻幀確定為初始圖像;上述方法還包括:在生成視頻幀序列的過程中,響應(yīng)于生成一視頻幀,基于目標(biāo)特效對(duì)應(yīng)的圖像處理方式對(duì)視頻幀進(jìn)行圖像處理,生成視頻幀對(duì)應(yīng)的目標(biāo)圖像;基于視頻幀對(duì)應(yīng)的目標(biāo)圖像及視頻幀,確定當(dāng)前圖像顯示數(shù)據(jù),控制圖像顯示裝置基于當(dāng)前圖像顯示數(shù)據(jù)進(jìn)行圖像顯示。
15、進(jìn)一步的,上述目標(biāo)特效至少包括下述之一:濾鏡特效、虛擬道具特效及美顏特效。
16、第二方面,本發(fā)明實(shí)施例提供了一種圖像顯示裝置,該裝置設(shè)置于增強(qiáng)現(xiàn)實(shí)可穿戴設(shè)備的控制器;增強(qiáng)現(xiàn)實(shí)可穿戴設(shè)備還包括與控制器連接的圖像顯示裝置;該裝置包括:目標(biāo)特效確定模塊,用于響應(yīng)于針對(duì)當(dāng)前場(chǎng)景的特效添加指令,確定目標(biāo)特效;圖像顯示數(shù)據(jù)生成模塊,用于基于目標(biāo)特效,生成圖像顯示數(shù)據(jù);圖像顯示模塊,用于控制圖像顯示裝置生成特效顯示圖層,基于圖像顯示數(shù)據(jù)在特效顯示圖層進(jìn)行圖像顯示。
17、第三方面,本發(fā)明實(shí)施例提供了一種電子設(shè)備,包括處理器和存儲(chǔ)器,存儲(chǔ)器存儲(chǔ)有能夠被處理器執(zhí)行的機(jī)器可執(zhí)行指令,處理器執(zhí)行機(jī)器可執(zhí)行指令以實(shí)現(xiàn)上述的圖像顯示方法。
18、第四方面,本發(fā)明實(shí)施例提供了一種機(jī)器可讀存儲(chǔ)介質(zhì),該機(jī)器可讀存儲(chǔ)介質(zhì)存儲(chǔ)有機(jī)器可執(zhí)行指令,機(jī)器可執(zhí)行指令在被處理器調(diào)用和執(zhí)行時(shí),機(jī)器可執(zhí)行指令促使處理器實(shí)現(xiàn)上述的圖像顯示方法。
19、本發(fā)明實(shí)施例帶來(lái)了以下有益效果:
20、上述一種圖像顯示方法、裝置及電子設(shè)備,應(yīng)用于增強(qiáng)現(xiàn)實(shí)可穿戴設(shè)備,響應(yīng)于針對(duì)當(dāng)前場(chǎng)景的特效添加指令,確定目標(biāo)特效;基于目標(biāo)特效,生成圖像顯示數(shù)據(jù);控制圖像顯示裝置生成特效顯示圖層,基于圖像顯示數(shù)據(jù)在特效顯示圖層進(jìn)行圖像顯示。該方式使用戶可以通過增強(qiáng)現(xiàn)實(shí)可穿戴設(shè)備實(shí)時(shí)查看當(dāng)前場(chǎng)景與特效的融合效果,提高了用戶對(duì)增強(qiáng)現(xiàn)實(shí)可穿戴設(shè)備的使用體驗(yàn)。
21、本發(fā)明的其他特征和優(yōu)點(diǎn)將在隨后的說(shuō)明書中闡述,并且,部分地從說(shuō)明書中變得顯而易見,或者通過實(shí)施本發(fā)明而了解。本發(fā)明的目的和其他優(yōu)點(diǎn)在說(shuō)明書、權(quán)利要求書以及附圖中所特別指出的結(jié)構(gòu)來(lái)實(shí)現(xiàn)和獲得。
22、為使本發(fā)明的上述目的、特征和優(yōu)點(diǎn)能更明顯易懂,下文特舉較佳實(shí)施例,并配合所附附圖,作詳細(xì)說(shuō)明如下。
1.一種圖像顯示方法,其特征在于,所述方法應(yīng)用于增強(qiáng)現(xiàn)實(shí)可穿戴設(shè)備的控制器;所述增強(qiáng)現(xiàn)實(shí)可穿戴設(shè)備還包括與所述控制器連接的圖像顯示裝置;所述方法包括:
2.根據(jù)權(quán)利要求1所述的方法,其特征在于,所述增強(qiáng)現(xiàn)實(shí)可穿戴設(shè)備還包括音頻采集裝置;
3.根據(jù)權(quán)利要求1所述的方法,其特征在于,控制所述圖像顯示裝置生成特效顯示圖層,基于所述圖像顯示數(shù)據(jù)在所述特效顯示圖層進(jìn)行圖像顯示的步驟,包括:
4.根據(jù)權(quán)利要求1所述的方法,其特征在于,所述增強(qiáng)現(xiàn)實(shí)可穿戴設(shè)備還包括與所述控制器連接的圖像采集裝置;
5.根據(jù)權(quán)利要求4所述的方法,其特征在于,所述方法還包括:
6.根據(jù)權(quán)利要求5所述的方法,其特征在于,確定所述初始圖像中的多個(gè)圖像區(qū)域的步驟,包括:
7.根據(jù)權(quán)利要求5所述的方法,其特征在于,從所述多個(gè)圖像區(qū)域中確定目標(biāo)區(qū)域的步驟,包括:
8.根據(jù)權(quán)利要求5所述的方法,其特征在于,基于所述目標(biāo)特效對(duì)應(yīng)的圖像處理方式及所述目標(biāo)區(qū)域,對(duì)所述初始圖像進(jìn)行圖像處理的步驟,包括:
9.根據(jù)權(quán)利要求4所述的方法,其特征在于,所述控制器包括主控單元及神經(jīng)網(wǎng)絡(luò)處理單元;
10.根據(jù)權(quán)利要求4所述的方法,其特征在于,基于所述目標(biāo)圖像及所述初始圖像,確定圖像顯示數(shù)據(jù)的步驟,包括:
11.根據(jù)權(quán)利要求1所述的方法,其特征在于,所述方法還包括:
12.根據(jù)權(quán)利要求4所述的方法,其特征在于,控制所述圖像顯示裝置生成特效顯示圖層,基于所述圖像顯示數(shù)據(jù)在所述特效顯示圖層進(jìn)行圖像顯示之后,所述方法還包括:
13.根據(jù)權(quán)利要求4所述的方法,其特征在于,控制所述圖像采集裝置對(duì)當(dāng)前場(chǎng)景進(jìn)行拍攝,生成初始圖像的步驟,包括:
14.根據(jù)權(quán)利要求4所述的方法,其特征在于,所述目標(biāo)特效至少包括下述之一:濾鏡特效、虛擬道具特效及美顏特效。
15.一種圖像顯示裝置,其特征在于,所述裝置設(shè)置于增強(qiáng)現(xiàn)實(shí)可穿戴設(shè)備的控制器;所述增強(qiáng)現(xiàn)實(shí)可穿戴設(shè)備還包括與所述控制器連接的圖像顯示裝置;所述裝置包括:
16.一種電子設(shè)備,其特征在于,包括處理器和存儲(chǔ)器,所述存儲(chǔ)器存儲(chǔ)有能夠被所述處理器執(zhí)行的機(jī)器可執(zhí)行指令,所述處理器執(zhí)行所述機(jī)器可執(zhí)行指令以實(shí)現(xiàn)權(quán)利要求1-14任一項(xiàng)所述的圖像顯示方法。
17.一種機(jī)器可讀存儲(chǔ)介質(zhì),其特征在于,所述機(jī)器可讀存儲(chǔ)介質(zhì)存儲(chǔ)有機(jī)器可執(zhí)行指令,所述機(jī)器可執(zhí)行指令在被處理器調(diào)用和執(zhí)行時(shí),所述機(jī)器可執(zhí)行指令促使所述處理器實(shí)現(xiàn)權(quán)利要求1-14任一項(xiàng)所述的圖像顯示方法。