【技術實現步驟摘要】
本申請涉及人工智能和數據處理，尤其涉及到一種電子屏幕區域的處理方法、裝置、以及智能板書提取系統。
技術介紹
1、隨著多媒體技術的發展，越來越多的智能教學一體機出現在課堂里。課堂上，老師可以根據不同的授課內容，選擇使用電子屏幕演示課件或者在黑板上手寫板書。而當老師選擇手寫板書或站在黑板前面講解時，不可避免地會遮擋住板書內容，這個問題可以通過智能板書提取方法去除遮擋來解決。
2、但是智能板書提取過程中，對于電子屏幕的檢測通常采用預先標定的方法，這種形式在每次安裝前都需要人工干預和確認相關設備位置，缺乏靈活性；另外，在黑板可以推拉的場景下，由于電子屏幕的可視部分發生變化，往往會匹配失效；這種方式不僅需要大量的算力和推理時間，且電子屏幕中出現的卡通人物等也會對板書的提取造成干擾。
技術實現思路
1、有鑒于此，本申請提供了一種板書的電子屏幕區域的處理方法、裝置、以及智能板書提取系統，以克服或者至少部分克服現有技術的不足之處。
2、第一方面，本申請實施例提供了一種電子屏幕區域的處理方法，包括：
3、基于改造的圖像分割模型，對板書視頻流中的視頻幀進行目標識別，得到電子屏幕和前景遮擋目標；
4、將被識別為電子屏幕的區域作為屏蔽區域，根據所述屏蔽區域與前景遮擋目標的相對位置關系，對所述前景遮擋目標進行掩蔽處理。
5、第二方面，本申請實施例還提供了一種電子屏幕區域的處理裝置，所述裝置包括：
6、目標識別單元，用于基于改造的圖像分割
7、掩蔽單元，用于將被識別為電子屏幕的區域作為屏蔽區域，根據所述屏蔽區域與前景遮擋目標的相對位置關系，對所述前景遮擋目標進行掩蔽處理。
8、第三方面，本申請實施例又提供了一種智能板書提取系統，所述智能板書提取系統部署有上述的電子屏幕區域的處理裝置。
9、第四方面，本申請實施例提供了一種存儲介質，其上存儲有計算機程序，所述程序被處理器執行時實現上述電子屏幕區域的處理方法。
10、第五方面，本申請實施例提供了一種計算機設備，包括存儲介質、處理器及存儲在存儲介質上并可在處理器上運行的計算機程序，所述處理器執行所述程序時實現上述電子屏幕區域的處理方法。
11、借由上述技術方案，本申請提供的一種電子屏幕區域的處理方法，該方法對圖像分割模型進行改造，在圖像分割模型中增加電子屏幕這個類別，使得圖像分割模型能夠識別在不增加額外算力消耗的情況下，可以同時識別人體和教具以及電子屏幕。在對板書視頻進行處理時，基于上述改造后的圖像分割模型，對板書視頻流的視頻幀進行目標識別，目標既包含了人、教具等對板書造成遮擋的前景遮擋目標，也包含了電子屏幕的信息，將電子屏幕區域設定為屏蔽區域，然后根據電子屏幕區域與前景遮擋目標之間的相對位置關系，采用屏蔽區域對前景遮擋目標進行掩蔽后，得到了視頻幀中的電子區域的處理結果，該處理結果可以進一步的用于智能板書的提取。本申請通過改造使得圖像分割模型可以同時識別人體區域和電子屏幕區域，從而不需要額外的目標檢測模型來檢測電子屏幕形成的屏蔽區域以及其他前景遮擋目標，為高效、準確的獲得智能板書提取中的遮罩圖像提供了保障，不但減少了屏蔽區域內的物體對板書提取方法的干擾，且大幅度減少后續處理的算力和時間消耗，提高了板書補全的效率，且將電子屏幕作為屏蔽區域可以直接過濾這些物體，減少了后續對板書提取方法的干擾。
12、上述說明僅是本申請技術方案的概述，為了能夠更清楚了解本申請的技術手段，而可依照說明書的內容予以實施，并且為了讓本申請的上述和其它目的、特征和優點能夠更明顯易懂，以下特舉本申請的具體實施方式。
本文檔來自技高網...【技術保護點】
1.一種電子屏幕區域的處理方法，其特征在于，包括：
2.根據權利要求1所述的方法，其特征在于，所述圖像分割模型是根據下述方法改造的：
3.根據權利要求2所述的方法，其特征在于，所述圖像分割模型包括：實例推理模塊、矩形框后處理模塊、和遮罩后處理模塊；
4.根據權利要求3所述的方法，其特征在于，所述位置信息為目標的最小外接矩形的坐標信息；
5.根據權利要求1所述的方法中，其特征在于，所述根據所述屏蔽區域與前景遮擋目標的相對位置關系，對所述前景遮擋目標進行掩蔽處理，包括：
6.根據權利要求1～5中任一項所述的方法，其特征在于，所述圖像分割模型是基于YOLO網絡構建的。
7.一種電子屏幕區域的處理裝置，其特征在于，所述裝置包括：
8.一種智能板書提取系統，其特征在于，所述智能板書提取系統部署有權利要求7所述的電子屏幕區域的處理裝置。
9.一種存儲介質，其上存儲有計算機程序，其特征在于，所述程序被處理器執行時實現權利要求1至6中任一項所述的電子屏幕區域的處理方法。
10.一種計算機設
...【技術特征摘要】
1.一種電子屏幕區域的處理方法，其特征在于，包括：
2.根據權利要求1所述的方法，其特征在于，所述圖像分割模型是根據下述方法改造的：
3.根據權利要求2所述的方法，其特征在于，所述圖像分割模型包括：實例推理模塊、矩形框后處理模塊、和遮罩后處理模塊；
4.根據權利要求3所述的方法，其特征在于，所述位置信息為目標的最小外接矩形的坐標信息；
5.根據權利要求1所述的方法中，其特征在于，所述根據所述屏蔽區域與前景遮擋目標的相對位置關系，對所述前景遮擋目標進行掩蔽處理，包括：
6.根據權利要求1～5中任一項所述的方法，其特征...
【專利技術屬性】
技術研發人員：楊婉香，肖兵，邱俊峰，李濤，
申請(專利權)人：珠海視熙科技有限公司，
類型：發明
國別省市：
還沒有人留言評論。發表了對其他瀏覽者有用的留言會獲得科技券。