本申請實施例涉及互聯(lián)網(wǎng)，尤其涉及一種課堂精彩場景信息的生成方法、系統(tǒng)、設(shè)備及存儲介質(zhì)。

背景技術(shù)：

1、課堂精彩場景信息，是指在課堂教學中由課堂的參與者所產(chǎn)生的關(guān)鍵信息，基于課堂精彩場景信息分析課堂教學過程有助于改善課堂教學的效果。目前，相關(guān)技術(shù)在生成課堂精彩場景信息時主要是結(jié)合asr技術(shù)以及計算機視覺技術(shù)，通過ai識別精彩事件的起始時間與結(jié)束時間來截取視頻，從而得到課堂精彩場景信息。

2、但是，在現(xiàn)實的課堂教學場景中存在諸多復雜因素，課堂的參與者會產(chǎn)生多種行為事件，容易導致某些課堂精彩場景信息不夠準確，不能很好地反映出課堂教學的關(guān)鍵情況。舉例來說，學生在課堂中可能做出多種無意識的動作，這些動作有可能被保存并用于生成課堂精彩場景信息，但是這類信息無法用于判斷課堂教學的效果，影響了課堂精彩場景信息的識別準確度。

技術(shù)實現(xiàn)思路

1、本申請實施例的一個目的旨在提供一種課堂精彩場景信息的生成方法，以解決課堂精彩場景信息的識別準確度不高的技術(shù)問題。

2、在第一方面，本申請實施例提供一種課堂精彩場景信息的生成方法，包括：

3、獲取課堂觀察數(shù)據(jù)；

4、根據(jù)所述課堂觀察數(shù)據(jù)確定課堂實錄文稿及有效教學行為事件，所述課堂實錄文稿為由在課堂上采集的語音數(shù)據(jù)轉(zhuǎn)換成文字內(nèi)容的文稿，所述有效教學行為事件為與有效教學行為對應的行為事件；

5、根據(jù)所述有效教學行為事件及所述課堂實錄文稿生成課堂精彩場景信息。

6、結(jié)合第一方面，在一種可能的實現(xiàn)方式中，所述根據(jù)所述有效教學行為事件及所述課堂實錄文稿生成課堂精彩場景信息包括：

7、在所述課堂實錄文稿上截取與所述有效教學行為事件對應的語句片段為精彩語句片段，所述精彩語句片段的時間范圍等于所述有效教學行為事件的有效時間范圍，所述有效時間范圍為以所述有效教學行為事件的行為發(fā)生時間點為中心進行上下浮動預設(shè)時長的時間范圍；

8、根據(jù)所述精彩語句片段生成課堂精彩場景信息。

9、結(jié)合第一方面，在一種可能的實現(xiàn)方式中，所述在所述課堂實錄文稿上截取與所述有效教學行為事件對應的語句片段為精彩語句片段包括：

10、將所述課堂實錄文稿、所述有效教學行為事件及所述有效時間范圍輸入預設(shè)的教學行為大模型，得到精彩語句片段。

11、結(jié)合第一方面，在一種可能的實現(xiàn)方式中，所述課堂精彩場景信息包括與所述精彩語句片段的精彩概要信息，所述根據(jù)所述精彩語句片段生成課堂精彩場景信息包括：

12、將所述精彩概要信息輸入預設(shè)的教學行為大模型，得到精彩概要信息。

13、結(jié)合第一方面，在一種可能的實現(xiàn)方式中，所述課堂觀察數(shù)據(jù)包括在課堂上采集的視頻數(shù)據(jù)，所述課堂精彩場景信息包括與所述精彩語句片段的精彩視頻片段，所述根據(jù)所述精彩語句片段生成課堂精彩場景信息包括：

14、確定所述精彩語句片段的起始時間與結(jié)束時間；

15、在所述視頻數(shù)據(jù)的時間軸上確定與所述精彩語句片段的起始時間與結(jié)束時間對應的精彩視頻片段。

16、結(jié)合第一方面，在一種可能的實現(xiàn)方式中，所述課堂精彩場景信息還包括精彩封面，所述根據(jù)所述精彩語句片段生成課堂精彩場景信息還包括：

17、在所述精彩視頻片段中提取滿足預設(shè)約束條件的關(guān)鍵幀作為目標關(guān)鍵幀；

18、獲取與所述精彩語句片段的精彩概要信息；

19、根據(jù)所述目標關(guān)鍵幀及所述精彩概要信息生成精彩封面。

20、結(jié)合第一方面，在一種可能的實現(xiàn)方式中，所述精彩視頻片段包括按照幀序排列的多幀關(guān)鍵幀，所述在所述精彩視頻片段中提取滿足預設(shè)約束條件的關(guān)鍵幀作為目標關(guān)鍵幀包括：

21、若所述關(guān)鍵幀的幀序為指定幀序，則確定所述關(guān)鍵幀滿足預設(shè)約束條件，選擇所述關(guān)鍵幀作為目標關(guān)鍵幀。

22、結(jié)合第一方面，在一種可能的實現(xiàn)方式中，所述課堂觀察數(shù)據(jù)包括在課堂上采集的音頻數(shù)據(jù)，所述根據(jù)所述課堂觀察數(shù)據(jù)確定課堂實錄文稿包括：

23、根據(jù)預設(shè)的語音識別模型，將所述音頻數(shù)據(jù)轉(zhuǎn)換成課堂實錄文稿。

24、結(jié)合第一方面，在一種可能的實現(xiàn)方式中，所述課堂觀察數(shù)據(jù)包括在課堂上采集的音頻數(shù)據(jù)、視頻數(shù)據(jù)及課堂教學信息，所述有效教學行為事件配置有有效時間范圍，所述根據(jù)所述課堂觀察數(shù)據(jù)確定有效教學行為事件包括：

25、根據(jù)所述音頻數(shù)據(jù)、視頻數(shù)據(jù)及課堂教學信息進行多模態(tài)分析，得到教學行為事件及行為發(fā)生時間點；

26、將所述教學行為事件及所述行為發(fā)生時間點輸入預設(shè)的狀態(tài)機，得到有效教學行為事件及有效時間范圍。

27、結(jié)合第一方面，在一種可能的實現(xiàn)方式中，所述方法還包括：

28、獲取輔助關(guān)聯(lián)信息，所述輔助關(guān)聯(lián)信息用于輔助生成所述課堂精彩場景信息；

29、將所述輔助關(guān)聯(lián)信息生成打包信息；

30、對所述打包信息執(zhí)行區(qū)塊鏈上鏈操作，得到區(qū)塊。

31、在第二方面，本申請實施例還提出一種課堂精彩場景信息的生成系統(tǒng)，包括數(shù)據(jù)采集裝置及終端設(shè)備，所述終端設(shè)備包括存儲器及處理器，所述處理器用于執(zhí)行存儲在所述存儲器中的一個或多個計算機程序，使得所述終端設(shè)備控制所述數(shù)據(jù)采集裝置實現(xiàn)如上所述的方法。

32、在第三方面，本申請實施例還提出一種課堂精彩場景信息的生成裝置，包括：

33、數(shù)據(jù)獲取模塊，用于獲取課堂觀察數(shù)據(jù)；

34、數(shù)據(jù)確認模塊，用于根據(jù)所述課堂觀察數(shù)據(jù)確定課堂實錄文稿及有效教學行為事件，所述課堂實錄文稿為由在課堂上采集的語音數(shù)據(jù)轉(zhuǎn)換成文字內(nèi)容的文稿，所述有效教學行為事件為與有效教學行為對應的行為事件；

35、數(shù)據(jù)生成模塊，用于根據(jù)所述有效教學行為事件及所述課堂實錄文稿生成課堂精彩場景信息。

36、在第四方面，本申請實施例還提出一種計算機設(shè)備，包括存儲器及處理器，所述存儲器連接至所述處理器，所述處理器用于執(zhí)行存儲在所述存儲器中的一個或多個計算機程序，所述處理器在執(zhí)行所述一個或多個計算機程序時，使得所述計算機設(shè)備實現(xiàn)如上所述的方法。

37、在第五方面，本申請實施例還提出一種計算機可讀存儲介質(zhì)，所述計算機可讀存儲介質(zhì)存儲有計算機程序，所述計算機程序包括程序指令，所述程序指令當被處理器執(zhí)行時使所述處理器執(zhí)行如上所述的方法。

38、本申請實施例可以實現(xiàn)如下技術(shù)效果：

39、基于本申請實施例所提出的方法，在生成課堂精彩場景信息時，獲取課堂觀察數(shù)據(jù)；根據(jù)課堂觀察數(shù)據(jù)確定課堂實錄文稿及有效教學行為事件，課堂實錄文稿為由在課堂上采集的語音數(shù)據(jù)轉(zhuǎn)換成文字內(nèi)容的文稿，有效教學行為事件為與有效教學行為對應的行為事件；根據(jù)有效教學行為事件及課堂實錄文稿生成課堂精彩場景信息其中，由于課堂精彩場景信息主要是根據(jù)有效教學行為事件得到的，因此避免了與有效教學行為事件無關(guān)的行為事件影響，提高了課堂精彩場景信息的識別準確度，從而改善了課堂精彩場景信息的應用效果。

技術(shù)特征：

1.一種課堂精彩場景信息的生成方法，其特征在于，包括：

2.根據(jù)權(quán)利要求1所述的生成方法，其特征在于，所述根據(jù)所述有效教學行為事件及所述課堂實錄文稿生成課堂精彩場景信息包括：

3.根據(jù)權(quán)利要求2所述的生成方法，其特征在于，所述在所述課堂實錄文稿上截取與所述有效教學行為事件對應的語句片段為精彩語句片段包括：

4.根據(jù)權(quán)利要求2所述的生成方法，其特征在于，所述課堂精彩場景信息包括與所述精彩語句片段的精彩概要信息，所述根據(jù)所述精彩語句片段生成課堂精彩場景信息包括：

5.根據(jù)權(quán)利要求2所述的生成方法，其特征在于，所述課堂觀察數(shù)據(jù)包括在課堂上采集的視頻數(shù)據(jù)，所述課堂精彩場景信息包括與所述精彩語句片段對應的精彩視頻片段，所述根據(jù)所述精彩語句片段生成課堂精彩場景信息包括：

6.根據(jù)權(quán)利要求5所述的生成方法，其特征在于，所述課堂精彩場景信息還包括精彩封面，所述根據(jù)所述精彩語句片段生成課堂精彩場景信息還包括：

7.根據(jù)權(quán)利要求6所述的生成方法，其特征在于，所述精彩視頻片段包括按照幀序排列的多幀關(guān)鍵幀，所述在所述精彩視頻片段中遍歷出滿足預設(shè)約束條件的關(guān)鍵幀作為目標關(guān)鍵幀包括：

8.根據(jù)權(quán)利要求1至7任一項所述的生成方法，其特征在于，所述課堂觀察數(shù)據(jù)包括在課堂上采集的音頻數(shù)據(jù)，所述根據(jù)所述課堂觀察數(shù)據(jù)確定課堂實錄文稿包括：

9.根據(jù)權(quán)利要求1至7任一項所述的生成方法，其特征在于，所述課堂觀察數(shù)據(jù)包括在課堂上采集的音頻數(shù)據(jù)、視頻數(shù)據(jù)及課堂教學信息，所述有效教學行為事件配置有有效時間范圍，所述根據(jù)所述課堂觀察數(shù)據(jù)確定有效教學行為事件包括：

10.根據(jù)權(quán)利要求1至7任一項所述的生成方法，其特征在于，還包括：

11.一種課堂精彩場景信息的生成系統(tǒng)，其特征在于，所述生成系統(tǒng)包括數(shù)據(jù)采集裝置及終端設(shè)備，所述終端設(shè)備包括存儲器及處理器，所述處理器用于執(zhí)行存儲在所述存儲器中的一個或多個計算機程序，使得所述終端設(shè)備控制所述數(shù)據(jù)采集裝置實現(xiàn)如權(quán)利要求1-10任一項所述的方法。

12.一種計算機設(shè)備，其特征在于，包括存儲器及處理器，所述存儲器連接至所述處理器，所述處理器用于執(zhí)行存儲在所述存儲器中的一個或多個計算機程序，所述處理器在執(zhí)行所述一個或多個計算機程序時，使得所述計算機設(shè)備實現(xiàn)如權(quán)利要求1-10任一項所述的方法。

13.一種計算機可讀存儲介質(zhì)，其特征在于，所述計算機可讀存儲介質(zhì)存儲有計算機程序，所述計算機程序包括程序指令，所述程序指令當被處理器執(zhí)行時使所述處理器執(zhí)行如權(quán)利要求1-10任一項所述的方法。

技術(shù)總結(jié)
本申請實施例涉及教學管理的技術(shù)領(lǐng)域，具體涉及一種課堂精彩場景信息的生成方法，包括：獲取課堂觀察數(shù)據(jù)；根據(jù)課堂觀察數(shù)據(jù)確定課堂實錄文稿及有效教學行為事件，課堂實錄文稿為由在課堂上采集的語音數(shù)據(jù)轉(zhuǎn)換成文字內(nèi)容的文稿，有效教學行為事件為與有效教學行為對應的行為事件；根據(jù)有效教學行為事件及課堂實錄文稿生成課堂精彩場景信息。其中，由于課堂精彩場景信息主要是根據(jù)有效教學行為事件得到的，因此避免了與有效教學行為事件無關(guān)的行為事件影響，提高了課堂精彩場景信息的識別準確度，從而改善了課堂精彩場景信息的應用效果。

技術(shù)研發(fā)人員：尹志超
受保護的技術(shù)使用者：廣州視源電子科技股份有限公司
技術(shù)研發(fā)日：
技術(shù)公布日：2025/4/28