【技術實現步驟摘要】
本專利技術涉及視頻監控領域，更具體地，涉及一種基于全景和特寫攝像頭追蹤發言者的方法和系統。
技術介紹
1、在視頻會議場景，在領導發言的時候，需要攝像頭追蹤到特定的發言者，顯示在主屏幕。目前主要的幾種發言者位置追蹤方法是通過設置ptz預置位的方式，在開會場景，提前演練，將攝像頭切到對應的預置特寫位置；通過人臉檢測+人臉識別技術，將攝像頭切到要識別的人臉特寫位置；通過聲音聲音識別技術等。
2、其中，通過ptz預置位的方式，在會議場景中，為了確保能夠及時地將發言者的特寫展示給所有參與者，需要提前對ptz(平移、傾斜、縮放)攝像頭進行預置位的設置和演練。并且在正式場景，需要專門的工作人員進行會控操作，設置對應的預置位，才能實現切到發言者特寫的功能。
3、人臉檢測+人臉識別技術雖然能實現發言者的智能追蹤，但需要提前上傳人臉信息，并且在會議過程中需要專人進行操作，這在一定程度上影響了會議的流暢性和便捷性。
4、此外，聲音識別技術雖然能夠識別發言者的聲音，但無法精確定位發言者的位置，因此在多人的會議場景中，可能無法準確追蹤到特定的發言者。
5、現有的視頻會議技術雖然在一定程度上滿足了基本的會議需求，但在攝像頭追蹤特定發言者方面仍存在一定的局限性。而且，以上技術都需要一定的會控操作，增加了人力成本和技術要求，無法完全實現會議終端的智能化，這在一定程度上降低了會議的效率。
技術實現思路
1、本專利技術提供了一種基于全景和特寫攝像頭追蹤發言者的方法和系統
2、第一方面，本專利技術提供了一種基于全景和特寫攝像頭追蹤發言者的方法，其中包括：
3、全景攝像頭將所有人拍攝進全景畫面中；
4、基于發言者的聲源和/或在所述全景畫面中分析所有人的面部動作，定位發言者在所述全景畫面中的人臉位置信息；
5、基于所述全景攝像頭與特寫攝像頭之間的位置關系以及發言者的人臉位置信息，確定所述特寫攝像頭的角度和焦距，對發言者進行特寫拍攝；
6、分析特寫畫面中發言者的人臉位置，微調所述特寫攝像頭，使發言者居中于特寫畫面。
7、第二方面，本專利技術提供了一種基于全景和特寫攝像頭追蹤發言者的系統，其中包括：
8、全景攝像頭，用于將所有人拍攝進全景畫面中；
9、定位模塊，用于基于發言者的聲源和/或在所述全景畫面中分析所有人的面部動作，定位發言者在所述全景畫面中的人臉位置信息；
10、確定模塊，用于基于所述全景攝像頭與特寫攝像頭之間的位置關系以及發言者的人臉位置信息，確定所述特寫攝像頭的角度和焦距；
11、特寫攝像頭，用于對發言者進行特寫拍攝；
12、微調模塊，用于分析特寫畫面中發言者的人臉位置，微調所述特寫攝像頭，使發言者居中于特寫畫面。
13、本專利技術的有益技術效果在于：
14、第一，在視頻會議中，雙目攝像頭(特寫+全景)的全景定焦攝像頭拍攝全景畫面可獲得全部參會者的人臉信息，無需提前上傳人臉信息，提高對發言者追蹤的效率；第二，結合人臉檢測和聲音識別技術，可實現精確定位發言者位置的功能；第三，內置位置轉換算法可推算出特寫鏡頭聚焦的ptz值簡化了提前設置和演練的步驟，提高了會議終端的智能性。
本文檔來自技高網...【技術保護點】
1.一種基于全景和特寫攝像頭追蹤發言者的方法，其中包括：
2.根據權利要求1所述方法，其中所述基于發言者的聲源和/或在所述全景畫面中分析所有人的面部動作，定位發言者在所述全景畫面中的人臉位置信息還包括如下步驟：
3.根據權利要求1所述方法，其中所述基于發言者的聲源和/或在所述全景畫面中分析所有人的面部動作，定位發言者在所述全景畫面中的人臉位置信息還包括如下步驟：
4.根據權利要求1所述方法，其中所述基于發言者的聲源和/或在所述全景畫面中分析所有人的面部動作，定位發言者在所述全景畫面中的人臉位置信息還包括如下步驟：
5.根據權利要求1所述方法，其中所述基于發言者的聲源和/或在所述全景畫面中分析所有人的面部動作，定位發言者在所述全景畫面中的人臉位置信息還包括如下步驟：
6.根據權利要求2、3或5所述方法，其中所述根據發言者的聲源在所述全景畫面中劃分相應范圍的聲源區域還包括如下步驟：
7.根據權利要求1所述方法，其中所述基于所述全景攝像頭與特寫攝像頭之間的位置關系以及發言者的人臉位置信息，確定所述特寫攝像頭的角度和
8.根據權利要求7所述方法，其中所述基于所述發言者人臉位置信息，計算出人臉中心點與所述全景圖像中心點的水平夾角AngleH和垂直夾角AngleV，以及計算出人臉范圍大小Area還包括如下步驟：
9.根據權利要求8所述方法，其中所述基于所述水平夾角AngleH、垂直夾角AngleV和所述人臉范圍大小Area確定所述全景水平方向偏移角度pan_p、所述全景垂直方向偏移角度tilt_p和所述全景變焦倍數zoom_p還包括如下步驟：
10.一種基于全景和特寫攝像頭追蹤發言者的系統，其中包括：
...【技術特征摘要】
1.一種基于全景和特寫攝像頭追蹤發言者的方法，其中包括：
2.根據權利要求1所述方法，其中所述基于發言者的聲源和/或在所述全景畫面中分析所有人的面部動作，定位發言者在所述全景畫面中的人臉位置信息還包括如下步驟：
3.根據權利要求1所述方法，其中所述基于發言者的聲源和/或在所述全景畫面中分析所有人的面部動作，定位發言者在所述全景畫面中的人臉位置信息還包括如下步驟：
4.根據權利要求1所述方法，其中所述基于發言者的聲源和/或在所述全景畫面中分析所有人的面部動作，定位發言者在所述全景畫面中的人臉位置信息還包括如下步驟：
5.根據權利要求1所述方法，其中所述基于發言者的聲源和/或在所述全景畫面中分析所有人的面部動作，定位發言者在所述全景畫面中的人臉位置信息還包括如下步驟：
6.根據權利要求2、3或5所述方法，其中所述根...
【專利技術屬性】
技術研發人員：李少玲，胡芳，趙興國，
申請(專利權)人：上海賽連信息科技有限公司，
類型：發明
國別省市：
還沒有人留言評論。發表了對其他瀏覽者有用的留言會獲得科技券。