【技術(shù)實(shí)現(xiàn)步驟摘要】
本專(zhuān)利技術(shù)屬于智能導(dǎo)播，尤其涉及一種面向舞蹈場(chǎng)景的智能導(dǎo)播系統(tǒng)。
技術(shù)介紹
1、舞蹈作為晚會(huì)的重要組成部分，對(duì)導(dǎo)播的要求極高，特別是在畫(huà)面內(nèi)容的捕捉和呈現(xiàn)方面。以往，這一任務(wù)主要依賴(lài)于人工導(dǎo)播，但是人工導(dǎo)播工作需要較高的技術(shù)和藝術(shù)水平，需要工作人員統(tǒng)籌整個(gè)團(tuán)隊(duì)，執(zhí)行節(jié)目編導(dǎo)的藝術(shù)構(gòu)想，運(yùn)用各類(lèi)輔助手段來(lái)展現(xiàn)節(jié)目，因此人工導(dǎo)播具有一定難度且需要消耗大量人力資源。
2、隨著智能技術(shù)的飛速發(fā)展，人們的生活方式和工作方式得到了極大便利。技術(shù)與導(dǎo)播藝術(shù)的結(jié)合，催生了智能導(dǎo)播系統(tǒng)。智能導(dǎo)播是一種利用人工智能技術(shù)的視頻制作系統(tǒng)，旨在實(shí)現(xiàn)更加智能化、自動(dòng)化和無(wú)人化的電視導(dǎo)播切換，智能導(dǎo)播為各種規(guī)模的電視節(jié)目導(dǎo)播提供了一種新的解決方案。
3、目前，在“智能導(dǎo)播助力2021春晚新媒體節(jié)目創(chuàng)新--淺析人工智能切換技術(shù)的應(yīng)用”一文中講述了智能導(dǎo)播在2021春晚新媒體節(jié)目中的應(yīng)用，人工智能技術(shù)實(shí)現(xiàn)了實(shí)時(shí)識(shí)別和智能切換，加速了節(jié)目制作，增加了創(chuàng)新性和吸引力，系統(tǒng)主要基于人臉識(shí)別和關(guān)鍵點(diǎn)檢測(cè)，結(jié)合聲音信息進(jìn)行綜合考慮，實(shí)現(xiàn)對(duì)主持人、嘉賓以及其他指導(dǎo)導(dǎo)播切換的關(guān)鍵狀態(tài)的準(zhǔn)確識(shí)別。另外，2019年tanwi?mallick以印度古典舞蹈為重點(diǎn)研究了舞蹈視頻分析問(wèn)題的方法，這種方法結(jié)合了音樂(lè)信息和運(yùn)動(dòng)信息來(lái)提取舞蹈中的關(guān)鍵姿勢(shì)，為了幫助分析舞蹈作品中的關(guān)鍵元素和技術(shù)，stancliffe通過(guò)引入視頻注釋技術(shù)，提出了一種新的方法來(lái)解決對(duì)舞蹈的分析能力。zhang?y,park?h?s提出了一種半監(jiān)督學(xué)習(xí)框架，在給定有限標(biāo)記數(shù)據(jù)(通常<4
4、綜上，從現(xiàn)有的大多數(shù)研究成果來(lái)看，與智能導(dǎo)播相關(guān)的研究都離不開(kāi)對(duì)畫(huà)面內(nèi)容的理解，采用不同的方法提取畫(huà)面語(yǔ)義信息，存在的不足：目前尚缺乏舞蹈場(chǎng)景的智能導(dǎo)播系統(tǒng)，且對(duì)舞蹈場(chǎng)景的語(yǔ)義分析通常集中在舞蹈動(dòng)作的識(shí)別上，與觸發(fā)導(dǎo)播切換的因素缺乏強(qiáng)關(guān)聯(lián)性。
技術(shù)實(shí)現(xiàn)思路
1、為解決上述技術(shù)問(wèn)題，本專(zhuān)利技術(shù)提出了一種面向舞蹈場(chǎng)景的智能導(dǎo)播系統(tǒng)，不同場(chǎng)景的導(dǎo)播要素不同，團(tuán)體舞的切換著重關(guān)注舞蹈隊(duì)形和舞者的肢體語(yǔ)言；需針對(duì)舞蹈場(chǎng)景，提取跟導(dǎo)播切換強(qiáng)關(guān)聯(lián)的語(yǔ)義特征，開(kāi)發(fā)舞蹈場(chǎng)景智能導(dǎo)播系統(tǒng)，以解決上述現(xiàn)有技術(shù)存在的問(wèn)題。
2、為實(shí)現(xiàn)上述目的，本專(zhuān)利技術(shù)提供了一種面向舞蹈場(chǎng)景的智能導(dǎo)播系統(tǒng)，包括：
3、拉流解碼模塊，用于從多個(gè)攝像機(jī)獲取視頻流并進(jìn)行解碼，得到視頻幀；
4、模糊檢測(cè)模塊，用于評(píng)估視頻流中的每一幀圖像是否清晰；
5、舞蹈隊(duì)形變化判斷模塊，用于基于目標(biāo)跟蹤算法分析解碼后的視頻幀，檢測(cè)并判斷舞蹈演員的隊(duì)形是否發(fā)生變化；
6、領(lǐng)舞識(shí)別模塊，用于在解碼的視頻幀中通過(guò)深度學(xué)習(xí)的人體姿態(tài)識(shí)別算法識(shí)別出領(lǐng)舞演員，并對(duì)領(lǐng)舞的出現(xiàn)進(jìn)行標(biāo)記；
7、景別切換模塊，依據(jù)對(duì)舞蹈節(jié)目視頻數(shù)據(jù)的統(tǒng)計(jì)結(jié)果，得到基于景別的鏡頭轉(zhuǎn)移概率矩陣以及鏡頭播放時(shí)長(zhǎng)矩陣，用于當(dāng)沒(méi)有隊(duì)形變化和領(lǐng)舞無(wú)特殊動(dòng)作時(shí)，依據(jù)景別的搭配，指導(dǎo)鏡頭的停留時(shí)長(zhǎng)和切換通道選擇；
8、智能導(dǎo)播邏輯切換模塊，用于根據(jù)舞蹈場(chǎng)景的需求，自動(dòng)執(zhí)行視頻切換指令，實(shí)現(xiàn)智能化的導(dǎo)播效果。
9、優(yōu)選地，所述模糊檢測(cè)模塊采用拉普拉斯變換方法和傅里葉變換方法。
10、優(yōu)選地，所述拉流解碼模塊包括：
11、視頻流地址獲取單元，用于獲取來(lái)自不同攝像機(jī)的視頻流地址信息；
12、視頻幀同步單元，用于確保從不同攝像機(jī)獲取的視頻幀在時(shí)間上的一致性。
13、優(yōu)選地，所述舞蹈隊(duì)形變化判斷模塊包括：
14、目標(biāo)檢測(cè)和跟蹤單元，用于基于目標(biāo)跟蹤算法檢測(cè)視頻幀中的舞蹈演員；
15、隊(duì)形分析單元，用于分析舞蹈演員的相對(duì)位置和運(yùn)動(dòng)軌跡，通過(guò)動(dòng)態(tài)閾值的設(shè)置來(lái)判斷隊(duì)形是否發(fā)生變化。
16、優(yōu)選地，所述領(lǐng)舞識(shí)別模塊包括：
17、人體姿態(tài)估計(jì)單元，用于基于深度學(xué)習(xí)的人體姿態(tài)識(shí)別算法估計(jì)舞蹈演員的身體關(guān)鍵點(diǎn)，得到人體姿態(tài)估計(jì)結(jié)果；
18、領(lǐng)舞判定單元，用于根據(jù)所述人體姿態(tài)估計(jì)結(jié)果和舞蹈場(chǎng)景的上下文信息，識(shí)別領(lǐng)舞演員。
19、優(yōu)選地，所述景別切換模塊包括：
20、景別分類(lèi)單元，用于對(duì)當(dāng)前視頻幀的景別進(jìn)行分析，得到景別屬于“遠(yuǎn)全中近特”中哪一類(lèi)的分類(lèi)結(jié)果；
21、基于景別狀態(tài)的隱馬爾可夫模型單元，用于以景別為狀態(tài)變量、以景別間的轉(zhuǎn)移關(guān)系為狀態(tài)轉(zhuǎn)移矩陣、以在每個(gè)景別下的鏡頭停留時(shí)間為發(fā)射矩陣進(jìn)行景別轉(zhuǎn)移和停留時(shí)間的建模；
22、景別切換決策單元，用于根據(jù)所述分類(lèi)結(jié)果和基于景別的隱馬爾可夫模型，決定是否進(jìn)行景別切換。
23、優(yōu)先地，所述智能導(dǎo)播邏輯切換模塊包括：
24、切換邏輯設(shè)計(jì)單元，用于設(shè)計(jì)基于舞蹈場(chǎng)景需求的切換邏輯；
25、切換指令執(zhí)行單元，用于根據(jù)所述切換邏輯設(shè)計(jì)單元的輸出，執(zhí)行視頻切換操作。
26、優(yōu)選地，所述智能導(dǎo)播系統(tǒng)采用多進(jìn)程和多線(xiàn)程結(jié)合的方式。
27、與現(xiàn)有技術(shù)相比，本專(zhuān)利技術(shù)具有如下優(yōu)點(diǎn)和技術(shù)效果：
28、本專(zhuān)利技術(shù)提出了一種面向舞蹈場(chǎng)景的智能導(dǎo)播系統(tǒng)，首先，在拉流解碼模塊中通過(guò)獲取多機(jī)位視頻流并進(jìn)行解碼，提供了后續(xù)處理所需的原始視頻數(shù)據(jù)，確保系統(tǒng)能夠處理來(lái)自不同攝像機(jī)的信號(hào)。其次，在舞蹈隊(duì)形變化判斷模塊中利用目標(biāo)跟蹤算法來(lái)跟蹤視頻中的舞蹈演員，并通過(guò)動(dòng)態(tài)閾值的設(shè)置來(lái)判斷隊(duì)形是否發(fā)生變化，從而在隊(duì)形變化時(shí)進(jìn)行相應(yīng)的切換。接著，在領(lǐng)舞識(shí)別模塊中使用基于深度學(xué)習(xí)的人體姿態(tài)識(shí)別算法來(lái)識(shí)別領(lǐng)舞演員，確保在領(lǐng)舞出現(xiàn)時(shí)能夠突出展示其舞姿。接著，在景別切換模塊中，依據(jù)對(duì)舞蹈節(jié)目視頻數(shù)據(jù)的統(tǒng)計(jì)結(jié)果，得到基于景別的鏡頭轉(zhuǎn)移概率矩陣以及鏡頭播放時(shí)長(zhǎng)矩陣，以指導(dǎo)鏡頭的停留時(shí)長(zhǎng)和自動(dòng)切換。最后，在智能導(dǎo)播邏輯切換模塊中，根據(jù)舞蹈場(chǎng)景的一般導(dǎo)播思路，設(shè)計(jì)切換邏輯并生成切換指令，實(shí)現(xiàn)自動(dòng)的智能導(dǎo)播切換，降低導(dǎo)播難度。
29、本專(zhuān)利技術(shù)基于多個(gè)模塊的協(xié)同工作，能夠?qū)崿F(xiàn)對(duì)舞蹈場(chǎng)景的智能導(dǎo)播，提高節(jié)目制作的效率和質(zhì)量，同時(shí)減少人力資源的消耗，并為觀(guān)眾帶來(lái)更好的觀(guān)賞體驗(yàn)。
本文檔來(lái)自技高網(wǎng)...【技術(shù)保護(hù)點(diǎn)】
1.一種面向舞蹈場(chǎng)景的智能導(dǎo)播系統(tǒng)，其特征在于，包括以下步驟：
2.根據(jù)權(quán)利要求1所述的面向舞蹈場(chǎng)景的智能導(dǎo)播系統(tǒng)，其特征在于，所述模糊檢測(cè)模塊采用拉普拉斯變換方法和傅里葉變換方法。
3.根據(jù)權(quán)利要求1所述的面向舞蹈場(chǎng)景的智能導(dǎo)播系統(tǒng)，其特征在于，所述拉流解碼模塊包括：
4.根據(jù)權(quán)利要求1所述的面向舞蹈場(chǎng)景的智能導(dǎo)播系統(tǒng)，其特征在于，所述舞蹈隊(duì)形變化判斷模塊包括：
5.根據(jù)權(quán)利要求1所述的面向舞蹈場(chǎng)景的智能導(dǎo)播系統(tǒng)，其特征在于，所述領(lǐng)舞識(shí)別模塊包括：
6.根據(jù)權(quán)利要求1所述的面向舞蹈場(chǎng)景的智能導(dǎo)播系統(tǒng)，其特征在于，所述景別切換模塊包括：
7.根據(jù)權(quán)利要求1所述的面向舞蹈場(chǎng)景的智能導(dǎo)播系統(tǒng)，其特征在于，所述智能導(dǎo)播邏輯切換模塊包括：
8.根據(jù)權(quán)利要求1所述的面向舞蹈場(chǎng)景的智能導(dǎo)播系統(tǒng)，其特征在于，所述智能導(dǎo)播系統(tǒng)采用多進(jìn)程和多線(xiàn)程結(jié)合的方式。
【技術(shù)特征摘要】
1.一種面向舞蹈場(chǎng)景的智能導(dǎo)播系統(tǒng)，其特征在于，包括以下步驟：
2.根據(jù)權(quán)利要求1所述的面向舞蹈場(chǎng)景的智能導(dǎo)播系統(tǒng)，其特征在于，所述模糊檢測(cè)模塊采用拉普拉斯變換方法和傅里葉變換方法。
3.根據(jù)權(quán)利要求1所述的面向舞蹈場(chǎng)景的智能導(dǎo)播系統(tǒng)，其特征在于，所述拉流解碼模塊包括：
4.根據(jù)權(quán)利要求1所述的面向舞蹈場(chǎng)景的智能導(dǎo)播系統(tǒng)，其特征在于，所述舞蹈隊(duì)形變化判斷模塊包括：
5...
【專(zhuān)利技術(shù)屬性】
技術(shù)研發(fā)人員：王彩虹，羅涵潞，吳曉雨，張亞娜，
申請(qǐng)(專(zhuān)利權(quán))人：中國(guó)傳媒大學(xué)，
類(lèi)型：發(fā)明
國(guó)別省市：
還沒(méi)有人留言評(píng)論。發(fā)表了對(duì)其他瀏覽者有用的留言會(huì)獲得科技券。