【技術實現步驟摘要】
本專利技術涉及虛擬會議互動，尤其涉及一種基于元宇宙的會議互動方法及系統。
技術介紹
1、隨著元宇宙技術的發展，通過計算機圖形學、動作捕捉、語音合成等技術，可以在虛擬世界構建的類人綜合體，使得元宇宙會議逐漸成為一種新型的會議形式。
2、目前，在虛擬會議互動中，雖然實現了線上會議的升級，為參與者提供了一個身臨其境的虛擬環境，但是在虛擬的環境中，尤其是在多人會議的復雜場景下，參會者的人數、位置、姿態都在不斷變化，且個人的動作和姿態在會議場景中被縮小，增加了會議互動動作識別和跟蹤的難度，并且多人會議中音頻質量也容易受到干擾，從而影響互動效果，因此在多人會議的復雜場景下，目前的互動方式用戶們之間的互動效果較差。
技術實現思路
1、本專利技術的目的是解決現有技術中的的問題，而提出的一種基于元宇宙的會議互動方法及系統。
2、為了實現上述目的，本專利技術采用了如下技術方案：
3、一種基于元宇宙的會議互動方法，包括以下步驟：
4、s1，采用人臉識別，通過提取參會者面部特征，與預先建立的人臉特征庫進行比對，得到每個參會者的唯一身份標識，對參會者身份識別；
5、s2，確定參會者身份后，實時檢測參會者的關鍵身體關節點位置變化，通過分析關節點之間的相對位置和運動軌跡，判斷參會者的具體動作；
6、s3，接收參會者語言的聲學特征，將參會者的語音信號轉換為文本，結合自然語言處理，對文本的語義和情感進行分析，得到參會者的語言表達意圖；
<...【技術保護點】
1.一種基于元宇宙的會議互動方法，其特征在于，包括以下步驟：
2.根據權利要求1所述的一種基于元宇宙的會議互動方法，其特征在于，還包括，在會議互動過程中，采用自適應網絡傳輸策略，通過實時檢測網絡狀態，動態調整數據傳輸速率和重傳機制，并結合冗余編碼，保持互動數據的低延時傳輸。
3.根據權利要求1所述的一種基于元宇宙的會議互動方法，其特征在于，還包括，針對多個參會者之間的互動數據同步，采用分布式同步控制，設置全局時鐘和時間戳機制，對不同設備之間的互動數據進行同步，并通過預測和插值，補償由于設備性能差異導致的數據不一致。
4.根據權利要求1所述的一種基于元宇宙的會議互動方法，其特征在于，S1中具體包括，通過圖像處理，從輸入的圖像或視頻中定位和標記出人臉區域，得到人臉區域數據；若人臉區域數據存在，則將檢測到的人臉區域通過仿射變換調整到標準姿態和大小，確保人臉對齊，得到對齊后的人臉圖像；通過對齊后的人臉圖像，采用特征提取，包括Gabor小波，提取出能夠表征身份的特征向量，得到人臉特征向量；判斷人臉特征向量是否完整，若完整，則將人臉特征向量與預先建立的已知
5.根據權利要求1所述的一種基于元宇宙的會議互動方法，其特征在于，S2中具體包括，若參會者身份信息已經獲取，則通過骨骼跟蹤算法實時捕捉參會者的關鍵身體關節點位置變化，得到初始的關節點坐標集合；根據初始的關節點坐標集合和時間序列，計算每個關節點的位置變化，得到關節點的運動軌跡數據；若獲取了所有關節點的運動軌跡數據，則分析關節點之間的相對位置變化，確定各個關節點的相對運動角度；若關節點的相對運動角度已經確定，則將其與預定義的動作模式庫進行比對，判斷參會者的具體動作類別；通過判斷得到的具體動作類別，標記該動作的起始時間點，根據后續的運動變化，確定動作的結束時間點；若動作的起始與結束時間點已確定，則根據時間序列計算動作的時間持續時長；獲取動作的時間持續時長后，結合先前動作信息，統計當前參會者所有動作的數量；若動作的數量統計完成，通過更新后的統計數據和動作信息，形成參會者的動作行為報告；根據動作行為報告，輸出參會者在會議過程中的活動狀態，為后續分析和決策提供數據支持。
6.根據權利要求1所述的一種基于元宇宙的會議互動方法，其特征在于，S3中具體包括，根據語音信號獲取參會者的聲音信號，提取其中的聲學特征；通過聲學特征，采用語音識別模型將語音信號轉換為文本，得到識別結果；通過自然語言處理技術分析文本的語義信息，得到語義理解；根據語義理解，判斷文本中包含的情感特征，得到情感分析結果；通過情感分析結果，結合語義理解，確定參會者的語言表達意圖；若語言表達意圖明確，則根據表達意圖，選擇適合的互動方式；獲取互動方式后，結合情感分析結果，進一步優化互動方式選擇；通過優化后的互動方式，判斷其是否符合業務目標，提高交流效果；若互動方式符合要求，則輸出互動方案。
7.根據權利要求1所述的一種基于元宇宙的會議互動方法，其特征在于，S4中具體包括，通過獲取參會者的身份信息，包括職位、部門、級別和與其他參會者的關系，并結合數據庫記錄，得到有關身份屬性的初步判斷結果；基于該判斷結果，與歷史數據進行交叉驗證，以提高身份屬性的準確性；通過捕捉和分析參會者的肢體語言、面部表情、眼神交流和坐姿站姿，采用圖像處理技術，判斷動作屬性；若發現動作與身份屬性之間存在明顯差異，則需要重新評估動作屬性的可信度；根據語音識別技術獲取語音數據，通過分析參會者的語氣語調、用詞選擇和表達內容，判斷語言意圖屬性；若語言意圖與身份屬性和動作屬性有矛盾，則需要調整語言意圖的權重，以確保邏輯一致性；綜合分析身份、動作和語言意圖三個屬性，應用預設的權重，計算出每個參會者的綜合得分；若綜合得分超過某一閾值，則進入下一步的判斷邏輯；通過比較綜合得分與不同互動意圖類別的閾值，判斷參會者的初步互動意圖；若該初步互動意圖與歷史數據不符，則重新調整閾值設置，以獲得更準確的判斷根據初步互動意圖的判斷結果，與預設的意圖類別進行匹配，獲取最接近的互動意圖類別；若匹配度不足，則需要調整預設的意圖參數，重新判斷。
8.根據權利要求1所述的一種基于元宇宙的會議互動方法，其特征在于，S5中具體包括，獲取參會者的音視頻輸入，通過意圖識別算法實時分析參會者的行為和語音，判斷并得到當前的互動意...
【技術特征摘要】
1.一種基于元宇宙的會議互動方法，其特征在于，包括以下步驟：
2.根據權利要求1所述的一種基于元宇宙的會議互動方法，其特征在于，還包括，在會議互動過程中，采用自適應網絡傳輸策略，通過實時檢測網絡狀態，動態調整數據傳輸速率和重傳機制，并結合冗余編碼，保持互動數據的低延時傳輸。
3.根據權利要求1所述的一種基于元宇宙的會議互動方法，其特征在于，還包括，針對多個參會者之間的互動數據同步，采用分布式同步控制，設置全局時鐘和時間戳機制，對不同設備之間的互動數據進行同步，并通過預測和插值，補償由于設備性能差異導致的數據不一致。
4.根據權利要求1所述的一種基于元宇宙的會議互動方法，其特征在于，s1中具體包括，通過圖像處理，從輸入的圖像或視頻中定位和標記出人臉區域，得到人臉區域數據；若人臉區域數據存在，則將檢測到的人臉區域通過仿射變換調整到標準姿態和大小，確保人臉對齊，得到對齊后的人臉圖像；通過對齊后的人臉圖像，采用特征提取，包括gabor小波，提取出能夠表征身份的特征向量，得到人臉特征向量；判斷人臉特征向量是否完整，若完整，則將人臉特征向量與預先建立的已知身份人員的人臉特征庫進行相似度計算，得到相似度分值；根據相似度分值，通過比較與人臉特征庫中的每個特征向量的相似度，判斷出最相似的特征向量，得到比對結果；從比對結果中，獲取與最高相似度對應的身份標識符，得到參會者的唯一身份標識；判斷唯一身份標識是否有效，若有效，則將該身份標識更新到身份識別記錄系統中，完成身份識別記錄。
5.根據權利要求1所述的一種基于元宇宙的會議互動方法，其特征在于，s2中具體包括，若參會者身份信息已經獲取，則通過骨骼跟蹤算法實時捕捉參會者的關鍵身體關節點位置變化，得到初始的關節點坐標集合；根據初始的關節點坐標集合和時間序列，計算每個關節點的位置變化，得到關節點的運動軌跡數據；若獲取了所有關節點的運動軌跡數據，則分析關節點之間的相對位置變化，確定各個關節點的相對運動角度；若關節點的相對運動角度已經確定，則將其與預定義的動作模式庫進行比對，判斷參會者的具體動作類別；通過判斷得到的具體動作類別，標記該動作的起始時間點，根據后續的運動變化，確定動作的結束時間點；若動作的起始與結束時間點已確定，則根據時間序列計算動作的時間持續時長；獲取動作的時間持續時長后，結合先前動作信息，統計當前參會者所有動作的數量；若動作的數量統計完成，通過更新后的統計數據和動作信息，形成參會者的動作行為報告；根據動作行為報告，輸出參會者在會議過程中的活動狀態，為后續分析和決策提供數據支持。
6.根據權利要求1所述的一種基于元宇...
【專利技術屬性】
技術研發人員：張小朝，廖志鵬，
申請(專利權)人：新國脈文旅科技有限公司，
類型：發明
國別省市：
還沒有人留言評論。發表了對其他瀏覽者有用的留言會獲得科技券。