本文提供了一種可變幀率的人體動(dòng)作分析處理方法、裝置及設(shè)備，所述方法包括：獲取預(yù)設(shè)幀率的運(yùn)動(dòng)視頻文件；對(duì)所述運(yùn)動(dòng)視頻文件中的每個(gè)視頻幀圖像進(jìn)行關(guān)節(jié)點(diǎn)識(shí)別，以得到基于時(shí)域的三維動(dòng)作數(shù)據(jù)模型集合；將所述運(yùn)動(dòng)視頻文件按照預(yù)設(shè)幀率分配規(guī)則進(jìn)行劃分，以確定不同時(shí)間段的運(yùn)動(dòng)視頻文件對(duì)應(yīng)的目標(biāo)幀率；將不同時(shí)間段的運(yùn)動(dòng)視頻文件的幀率轉(zhuǎn)換成對(duì)應(yīng)的目標(biāo)幀率，以確定所述運(yùn)動(dòng)視頻文件的幀率集合；將三維動(dòng)作數(shù)據(jù)模型集合和幀率集合進(jìn)行封裝處理，得到封裝文件，以使用戶通過封裝文件進(jìn)行運(yùn)動(dòng)數(shù)據(jù)分析，本文采用可變幀率的處理方式，根據(jù)實(shí)際的動(dòng)作類型進(jìn)行動(dòng)態(tài)的分析處理，并且盡可能的保證模型數(shù)據(jù)的準(zhǔn)確性和處理的及時(shí)性。及時(shí)性。及時(shí)性。
【技術(shù)實(shí)現(xiàn)步驟摘要】
一種可變幀率的人體動(dòng)作分析處理方法、裝置及設(shè)備
[0001]本文屬于計(jì)算機(jī)
，具體涉及一種可變幀率的人體動(dòng)作分析處理方法、裝置及系統(tǒng)。
技術(shù)介紹
[0002]隨著健康生活觀念的興起，人們居家健身的意識(shí)逐漸加強(qiáng)，智能健身鏡市場(chǎng)也隨之興起，各類與之相關(guān)的產(chǎn)品也應(yīng)運(yùn)而生。智能健身鏡作為一款將線下健身房延伸到最終用戶身邊的產(chǎn)品也在不斷迭代更新和完善中，從最初不支持AI視頻分析，正向終端智能化方向發(fā)展，不僅支持語音識(shí)別輸入，也支持體感輸入、AI視頻動(dòng)作輔助分析等。
[0003]在對(duì)實(shí)際運(yùn)動(dòng)者的動(dòng)作進(jìn)行視頻采集和分析處理的過程中，存在如下問題：只能通過固定拍攝的視頻幀率對(duì)運(yùn)動(dòng)視頻進(jìn)行分析和處理。當(dāng)動(dòng)作頻率較高時(shí)，可能出現(xiàn)視頻分析處理大大超出設(shè)備實(shí)際處理能力情況，造成動(dòng)作分析不準(zhǔn)確和嚴(yán)重滯后；對(duì)于動(dòng)作較慢的情況，大量的處理能力都在做相對(duì)低效的重復(fù)分析處理，大量的分析處理設(shè)備資源造成較大的浪費(fèi)，因此如何提高對(duì)人體動(dòng)作分析的效率成為目前亟需解決的技術(shù)問題。
技術(shù)實(shí)現(xiàn)思路
[0004]針對(duì)現(xiàn)有技術(shù)的上述問題，本文的目的在于，提供一種可變幀率的人體動(dòng)作分析處理方法、裝置及設(shè)備，可以提高人體動(dòng)作處理分析的效率。
[0005]為了解決上述技術(shù)問題，本文的具體技術(shù)方案如下：
[0006]一方面，本文提供一種可變幀率的人體動(dòng)作分析處理方法，所述方法包括：
[0007]獲取預(yù)設(shè)幀率的運(yùn)動(dòng)視頻文件；
[0008]對(duì)所述運(yùn)動(dòng)視頻文件中的每個(gè)視頻幀圖像進(jìn)行關(guān)節(jié)點(diǎn)識(shí)別，以得到基于時(shí)域的三維動(dòng)作數(shù)據(jù)模型集合；
[0009]將所述運(yùn)動(dòng)視頻文件按照預(yù)設(shè)幀率分配規(guī)則進(jìn)行劃分，以確定不同時(shí)間段的運(yùn)動(dòng)視頻文件對(duì)應(yīng)的目標(biāo)幀率；
[0010]將不同時(shí)間段的運(yùn)動(dòng)視頻文件的幀率轉(zhuǎn)換成對(duì)應(yīng)的目標(biāo)幀率，以確定所述運(yùn)動(dòng)視頻文件的幀率集合；
[0011]將所述三維動(dòng)作數(shù)據(jù)模型集合和所述幀率集合進(jìn)行封裝處理，得到封裝文件，以使用戶通過所述封裝文件進(jìn)行運(yùn)動(dòng)數(shù)據(jù)分析。
[0012]進(jìn)一步地，所述對(duì)所述運(yùn)動(dòng)視頻文件中的每個(gè)視頻幀圖像進(jìn)行關(guān)節(jié)點(diǎn)識(shí)別，以得到基于時(shí)域的三維動(dòng)作數(shù)據(jù)模型集合，包括：
[0013]對(duì)所述運(yùn)動(dòng)視頻文件中的每個(gè)視頻幀圖像進(jìn)行關(guān)節(jié)點(diǎn)識(shí)別，確定人體的各個(gè)關(guān)節(jié)點(diǎn)信息；
[0014]根據(jù)每個(gè)視頻圖像中各個(gè)關(guān)節(jié)點(diǎn)的信息，得到每個(gè)視頻幀圖像對(duì)應(yīng)的人體三維模型；
[0015]根據(jù)視頻幀圖像的時(shí)序，對(duì)全部的人體三維模型進(jìn)行整合，以得到基于時(shí)域的三
維動(dòng)作數(shù)據(jù)模型集合。
[0016]進(jìn)一步地，所述將所述運(yùn)動(dòng)視頻文件按照預(yù)設(shè)幀率分配規(guī)則進(jìn)行劃分，以確定不同時(shí)間段的運(yùn)動(dòng)視頻文件對(duì)應(yīng)的目標(biāo)幀率，包括：
[0017]獲取所述運(yùn)動(dòng)視頻文件對(duì)應(yīng)的運(yùn)動(dòng)類型；
[0018]根據(jù)所述運(yùn)動(dòng)類型，將所述運(yùn)動(dòng)視頻文件分成多個(gè)子視頻，每個(gè)子視頻的重要程度與相鄰子視頻的重要程度不同；
[0019]根據(jù)每個(gè)子視頻的重要程度，確定該子視頻對(duì)應(yīng)的目標(biāo)幀率，其中重要程度越高的子視頻的目標(biāo)幀率越高。
[0020]進(jìn)一步地，所述根據(jù)所述運(yùn)動(dòng)類型，將所述運(yùn)動(dòng)視頻文件分成多個(gè)子視頻，進(jìn)一步包括：
[0021]獲取所述運(yùn)動(dòng)類型對(duì)應(yīng)的屬性特征，所述屬性特征表征所述運(yùn)動(dòng)類型的運(yùn)動(dòng)目標(biāo)；
[0022]根據(jù)所述運(yùn)動(dòng)類型對(duì)應(yīng)的屬性特征，將所述運(yùn)動(dòng)類型的運(yùn)動(dòng)動(dòng)作劃分為多個(gè)節(jié)拍，相鄰兩個(gè)節(jié)拍關(guān)注的運(yùn)動(dòng)目標(biāo)不同；
[0023]根據(jù)多個(gè)節(jié)拍，將所述運(yùn)動(dòng)視頻文件分成多個(gè)子視頻，其中運(yùn)動(dòng)目標(biāo)越接近所述運(yùn)動(dòng)類型的運(yùn)動(dòng)目標(biāo)的節(jié)拍對(duì)應(yīng)的子視頻的重要程度越高。
[0024]進(jìn)一步地，所述將所述運(yùn)動(dòng)視頻文件按照預(yù)設(shè)幀率分配規(guī)則進(jìn)行劃分，以確定不同時(shí)間段的運(yùn)動(dòng)視頻文件對(duì)應(yīng)的目標(biāo)幀率，還可以包括：
[0025]計(jì)算每一視頻幀圖像和下一視頻幀圖像的相似度，得到基于時(shí)域的相似度集合；
[0026]確定所述相似度集合中超過預(yù)設(shè)值的相似度對(duì)應(yīng)的視頻幀圖像，將該視頻幀圖像定義為端部幀，其中運(yùn)動(dòng)視頻文件的兩端視頻幀圖像也定義為端部幀；
[0027]根據(jù)所述端部幀，將所述運(yùn)動(dòng)視頻文件劃分為多個(gè)時(shí)間段的運(yùn)動(dòng)視頻文件；
[0028]確定每個(gè)時(shí)間段的運(yùn)動(dòng)視頻文件中視頻幀圖像滿足視頻檢測(cè)的目標(biāo)幀率。
[0029]進(jìn)一步地，所述將不同時(shí)間段的運(yùn)動(dòng)視頻文件的幀率轉(zhuǎn)換成對(duì)應(yīng)的目標(biāo)幀率，以確定所述運(yùn)動(dòng)視頻文件的幀率集合；
[0030]獲取不同時(shí)間段中運(yùn)動(dòng)視頻文件中人體動(dòng)作的變化頻率；
[0031]根據(jù)所述變化頻率，確定每個(gè)時(shí)間段對(duì)應(yīng)的編碼方式；
[0032]根據(jù)每個(gè)時(shí)間段對(duì)應(yīng)的編碼方式，將不同時(shí)間段的運(yùn)動(dòng)視頻文件的幀率轉(zhuǎn)換成對(duì)應(yīng)的目標(biāo)幀率以確定所述運(yùn)動(dòng)視頻文件的幀率集合。
[0033]進(jìn)一步地，所述使用戶通過所述封裝文件進(jìn)行運(yùn)動(dòng)數(shù)據(jù)分析，包括：
[0034]響應(yīng)用戶的健身播放指令，對(duì)所述封裝文件進(jìn)行解碼得到所述三維動(dòng)作數(shù)據(jù)模型集合和所述幀率集合，并通過顯示設(shè)備播放所述運(yùn)動(dòng)視頻文件；
[0035]視頻采集設(shè)備按照所述幀率集合對(duì)用戶的運(yùn)動(dòng)過程進(jìn)行視頻采集，視頻采集設(shè)備至少包括所述顯示設(shè)備；
[0036]根據(jù)所述視頻采集設(shè)備的采集數(shù)據(jù)，實(shí)時(shí)建立用戶的實(shí)際三維動(dòng)作數(shù)據(jù)模型；
[0037]實(shí)時(shí)比較所述實(shí)際三維動(dòng)作數(shù)據(jù)模型和基于時(shí)域的三維動(dòng)作數(shù)據(jù)模型集合中的同步模型；
[0038]在比較結(jié)果超過預(yù)設(shè)范圍的情況下，在顯示設(shè)備上生成動(dòng)作調(diào)整提示。
[0039]進(jìn)一步地，當(dāng)所述視頻采集設(shè)備包括所述顯示設(shè)備和至少一個(gè)終端設(shè)備時(shí)，所述
顯示設(shè)備和每個(gè)所述終端設(shè)備的采集視角不相同；
[0040]所述根據(jù)所述視頻采集設(shè)備的采集數(shù)據(jù)，實(shí)時(shí)建立用戶的實(shí)際三維動(dòng)作數(shù)據(jù)模型，進(jìn)一步包括：
[0041]實(shí)時(shí)獲取每個(gè)視頻采集設(shè)備的網(wǎng)絡(luò)參數(shù)；
[0042]根據(jù)所述網(wǎng)絡(luò)參數(shù)，計(jì)算每個(gè)視頻采集設(shè)備的網(wǎng)絡(luò)處理能力；
[0043]根據(jù)所述網(wǎng)絡(luò)處理能力，從全部的所述視頻采集設(shè)備中確定主控設(shè)備；
[0044]所述主控設(shè)備根據(jù)每個(gè)視頻采集設(shè)備的網(wǎng)絡(luò)處理能力和預(yù)設(shè)分配策略，確定視頻采集設(shè)備的數(shù)據(jù)處理時(shí)序；
[0045]根據(jù)所述數(shù)據(jù)處理時(shí)序，所述視頻處理設(shè)備處理所述采集數(shù)據(jù)，并將處理結(jié)果發(fā)送至主控設(shè)備；
[0046]所述主控設(shè)備對(duì)接收到的處理結(jié)果進(jìn)行整合，得到用戶的實(shí)際三維動(dòng)作數(shù)據(jù)模型。
[0047]另一方面，本文還提供一種可變幀率的人體動(dòng)作分析處理裝置，所述裝置包括：
[0048]獲取模塊，用于獲取預(yù)設(shè)幀率的運(yùn)動(dòng)視頻文件；
[0049]三維動(dòng)作數(shù)據(jù)模型集合確定模塊，用于對(duì)所述運(yùn)動(dòng)視頻文件中的每個(gè)視頻幀圖像進(jìn)行關(guān)節(jié)點(diǎn)識(shí)別，以得到基于時(shí)域的三維動(dòng)作數(shù)據(jù)模型集合；
[0050]目標(biāo)幀率確定模塊，用于將所述運(yùn)動(dòng)視頻文件按照預(yù)設(shè)幀率分配規(guī)則進(jìn)行劃分，以確定不同時(shí)間段的運(yùn)動(dòng)視頻文件對(duì)應(yīng)的目標(biāo)幀率；
[0051]幀率集合確定模塊，用于將不同時(shí)間段的運(yùn)動(dòng)視頻文件的幀率轉(zhuǎn)換成對(duì)應(yīng)的目標(biāo)幀率本文檔來自技高網(wǎng)...
【技術(shù)保護(hù)點(diǎn)】
【技術(shù)特征摘要】
1.一種可變幀率的人體動(dòng)作分析處理方法，其特征在于，所述方法包括：獲取預(yù)設(shè)幀率的運(yùn)動(dòng)視頻文件；對(duì)所述運(yùn)動(dòng)視頻文件中的每個(gè)視頻幀圖像進(jìn)行關(guān)節(jié)點(diǎn)識(shí)別，以得到基于時(shí)域的三維動(dòng)作數(shù)據(jù)模型集合；將所述運(yùn)動(dòng)視頻文件按照預(yù)設(shè)幀率分配規(guī)則進(jìn)行劃分，以確定不同時(shí)間段的運(yùn)動(dòng)視頻文件對(duì)應(yīng)的目標(biāo)幀率；將不同時(shí)間段的運(yùn)動(dòng)視頻文件的幀率轉(zhuǎn)換成對(duì)應(yīng)的目標(biāo)幀率，以確定所述運(yùn)動(dòng)視頻文件的幀率集合；將所述三維動(dòng)作數(shù)據(jù)模型集合和所述幀率集合進(jìn)行封裝處理，得到封裝文件，以使用戶通過所述封裝文件進(jìn)行運(yùn)動(dòng)數(shù)據(jù)分析。2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述對(duì)所述運(yùn)動(dòng)視頻文件中的每個(gè)視頻幀圖像進(jìn)行關(guān)節(jié)點(diǎn)識(shí)別，以得到基于時(shí)域的三維動(dòng)作數(shù)據(jù)模型集合，包括：對(duì)所述運(yùn)動(dòng)視頻文件中的每個(gè)視頻幀圖像進(jìn)行關(guān)節(jié)點(diǎn)識(shí)別，確定人體的各個(gè)關(guān)節(jié)點(diǎn)信息；根據(jù)每個(gè)視頻圖像中各個(gè)關(guān)節(jié)點(diǎn)的信息，得到每個(gè)視頻幀圖像對(duì)應(yīng)的人體三維模型；根據(jù)視頻幀圖像的時(shí)序，對(duì)全部的人體三維模型進(jìn)行整合，以得到基于時(shí)域的三維動(dòng)作數(shù)據(jù)模型集合。3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述將所述運(yùn)動(dòng)視頻文件按照預(yù)設(shè)幀率分配規(guī)則進(jìn)行劃分，以確定不同時(shí)間段的運(yùn)動(dòng)視頻文件對(duì)應(yīng)的目標(biāo)幀率，包括：獲取所述運(yùn)動(dòng)視頻文件對(duì)應(yīng)的運(yùn)動(dòng)類型；根據(jù)所述運(yùn)動(dòng)類型，將所述運(yùn)動(dòng)視頻文件分成多個(gè)子視頻，每個(gè)子視頻的重要程度與相鄰子視頻的重要程度不同；根據(jù)每個(gè)子視頻的重要程度，確定該子視頻對(duì)應(yīng)的目標(biāo)幀率，其中重要程度越高的子視頻的目標(biāo)幀率越高。4.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述根據(jù)所述運(yùn)動(dòng)類型，將所述運(yùn)動(dòng)視頻文件分成多個(gè)子視頻，進(jìn)一步包括：獲取所述運(yùn)動(dòng)類型對(duì)應(yīng)的屬性特征，所述屬性特征表征所述運(yùn)動(dòng)類型的運(yùn)動(dòng)目標(biāo)；根據(jù)所述運(yùn)動(dòng)類型對(duì)應(yīng)的屬性特征，將所述運(yùn)動(dòng)類型的運(yùn)動(dòng)動(dòng)作劃分為多個(gè)節(jié)拍，相鄰兩個(gè)節(jié)拍關(guān)注的運(yùn)動(dòng)目標(biāo)不同；根據(jù)多個(gè)節(jié)拍，將所述運(yùn)動(dòng)視頻文件分成多個(gè)子視頻，其中運(yùn)動(dòng)目標(biāo)越接近所述運(yùn)動(dòng)類型的運(yùn)動(dòng)目標(biāo)的節(jié)拍對(duì)應(yīng)的子視頻的重要程度越高。5.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述將所述運(yùn)動(dòng)視頻文件按照預(yù)設(shè)幀率分配規(guī)則進(jìn)行劃分，以確定不同時(shí)間段的運(yùn)動(dòng)視頻文件對(duì)應(yīng)的目標(biāo)幀率，還可以包括：計(jì)算每一視頻幀圖像和下一視頻幀圖像的相似度，得到基于時(shí)域的相似度集合；確定所述相似度集合中超過預(yù)設(shè)值的相似度對(duì)應(yīng)的視頻幀圖像，將該視頻幀圖像定義為端部幀，其中運(yùn)動(dòng)視頻文件的兩端視頻幀圖像也定義為端部幀；根據(jù)所述端部幀，將所述運(yùn)動(dòng)視頻文件劃分為多個(gè)時(shí)間段的運(yùn)動(dòng)視頻文件；確定每個(gè)時(shí)間段的運(yùn)動(dòng)視頻文件中視頻幀圖像滿足視頻檢測(cè)的目標(biāo)幀率。6.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述將不同時(shí)間段的運(yùn)動(dòng)視頻文件的幀率<...
【專利技術(shù)屬性】
技術(shù)研發(fā)人員：王俊，毛軼嘉，陳國(guó)潤(rùn)，徐玉清，鄭榮，
申請(qǐng)(專利權(quán))人：上海理想信息產(chǎn)業(yè)集團(tuán)有限公司，
類型：發(fā)明
國(guó)別省市：
還沒有人留言評(píng)論。發(fā)表了對(duì)其他瀏覽者有用的留言會(huì)獲得科技券。