一種基于AR虛擬現實技術的整形手術實時捕捉系統技術方案

本發明專利技術公開了一種基于AR虛擬現實技術的整形手術實時捕捉系統，包括：圖像采集單元,采集人體需要進行整形部位的圖像信息；AR呈現單元，接收所述圖像采集單元傳送的人體需要整形部位的真實圖像信息結合影像辨識技術展現該人體部位的虛擬圖像，數據分析單元與AR呈現單元實時數據通信，工作狀態下：當AR呈現單元為人體部位進行整形手術佩戴整形模型時所述數據分析單元根據人體的五官特征對每次佩戴的整形模型進行合理性分析整理出器官的曲線是否符合標準狀態并繪制出整形后的圖像；該系統還包括與AR呈現單元進行實時數據通信的終端單元，AR呈現單元將用戶選擇的整形模型以及該整形調整下用戶的人體具體外部圖像實時傳送至終端單元。

A real time capture system for plastic surgery based on AR virtual reality technology

The invention discloses a plastic surgery real-time capture system, AR based on virtual reality technology includes image acquisition unit, image information acquisition human need for plastic parts; AR rendering unit receives the image acquisition unit transmits the human needs of the plastic parts of the true image information by image recognition technology to show the virtual images of the human body the data analysis unit and the AR real-time data communication unit, working condition: when AR presents the data analysis unit for each model according to plastic Dan Yuangen wearing facial features of human rationality analysis to sort out whether conforms to the standard curve of organs of state and draw the image shaping for human body wearing plastic surgery plastic model; the system also comprises a terminal unit for real-time data communication and AR display unit, AR showed the single The utility model transfers the shaping model selected by the user to the terminal unit in real time, and the image of the human body is transmitted to the terminal unit.

【技術實現步驟摘要】

本專利技術涉及虛擬現實
，尤其涉及一種基于AR虛擬現實技術的整形手術實時捕捉系統。
技術介紹
AR即增強現實是一種通過計算攝影機攝像的位置以及角度再結合相應的圖像處理技術，這種技術的目的是在計算機屏幕上把虛擬世界在現實世界中進行互動和呈現。通常情況下技術人員是將顯示器屏幕擴展到真實環境中，使計算機窗口與圖標疊映于現實對象，由用戶的眼睛、手勢來指點進行操作讓三維物體在用戶的全景視野中根據當前任務或者需要交互的改變其形狀和外觀，對于現實目標通過疊加虛擬景象產生透視的增強效果。例如我們可以將地圖信息直接插入到現實景觀來引導駕駛員進行行車駕駛，用戶可以通過虛擬現實技術來觀看景觀信息等等。目前人體整形手術得到廣大用戶的關注和討論的話題,很多人采用整形手術來調整自己的面部特征或者身體的其他部位特征從而使自己的五官更加完美,使自己的身心更加愉悅。但是現有技術中醫生都是采用直接在人體上進行整形手術的方式,沒有在手術前給出用戶一個更明確的手術后圖像信息,這樣造成很多整形手術存在失敗或者是用戶不滿意的現象。
技術實現思路
根據現有技術存在的問題，本專利技術公開了一種基于AR虛擬現實技術的整形手術實時捕捉系統，包括圖像采集單元,采集人體需要進行整形部位的圖像信息；AR呈現單元，接收所述圖像采集單元傳送的人體需要整形部位的真實圖像信息結合影像辨識技術展現該人體部位的虛擬圖像，所述AR呈現單元讀取該人體部位的特征點信息將不同的整形模型投射、疊加到該部位進行虛擬現實展示，同時通過攝像頭捕捉人體的影像信息,該人體部位的3D影像將以360度形式在患者的身體上顯示；數據分析單元，與所述AR呈現單元實時數據通信，工作狀態下：當AR呈現單元為人體部位進行整形手術佩戴整形模型時所述數據分析單元根據人體的五官特征對每次佩戴的整形模型進行合理性分析整理出器官的曲線是否符合標準狀態并繪制出整形后的圖像；整形體驗單元，接收所述數據分析單元傳送的數據信息根據上述選擇的整形模型以及人體需要整形的部位進行整形體驗，所述整形體驗單元調取其內部存儲的整形工具以及該整形過程中具體細節制作出整體整形流程并生成整形視頻；首先將每個動作圖像進行顏色空間轉換，再采用MeanShift算法通過迭代尋優方式，找到概率分布的極值來定位每一個動作過程，將視頻圖像的所有幀做MeanShift運算，搜索到每一個步驟的中心位置；該系統還包括與AR呈現單元進行實時數據通信的終端單元，所述AR呈現單元將用戶選擇的整形模型以及該整形調整下用戶的人體具體外部圖像實時傳送至終端單元。所述AR呈現單元包括存儲有與人體的多個器官進行配套的整形模型的存儲模塊和映射模塊，在AR呈現單元為人體的器官進行整形展現時，所述映射模塊實時對人體的實際器官的邊緣部位與模型的邊緣部位進行無縫對接。所述數據分析單元包括存儲有基于人體美學技術的人體各個面部器官和人體多個器官協調比例信息的數據模塊和分析建議模塊，所述分析建議模塊結合人體美學技術對整形后的人體表情進行數據化分析和美感建議。所述整形體驗單元包括存儲有各個整形過程中使用的工具信息的元素存儲單元，所述元素存儲單元內存儲有各個工具的使用說明和與之匹配的手術類型以及該工具的操作手法，所述整形體驗單元還包括視頻體驗生成單元，所述視頻體驗生成單元根據選擇的整形工具和整形部位生成整形視頻；觀看中用戶可以調取每一整形步驟進行慢鏡頭播放讀取元素存儲單元內具體的整形手法和用力程度。由于采用了上述技術方案，本專利技術提供的一種基于AR虛擬現實技術的整形手術實時捕捉系統，通過圖像采集單位來采集人體需要整形的實際的圖像信息，通過AR呈現單元進行整形匹配虛擬現實的圖像顯示，通過數據分析單元對整形結果進行理論分析和美感評價，這樣用戶可以根據虛擬現實相結合技術對整形后的情況進行詳細的了解和觀察，從而判定以及選擇采用哪種方案進行整形手術。附圖說明為了更清楚地說明本申請實施例或現有技術中的技術方案，下面將對實施例或現有技術描述中所需要使用的附圖作簡單地介紹，顯而易見地，下面描述中的附圖僅僅是本申請中記載的一些實施例，對于本領域普通技術人員來講，在不付出創造性勞動的前提下，還可以根據這些附圖獲得其他的附圖。圖1為本專利技術系統的結構示意圖。具體實施方式為使本專利技術的技術方案和優點更加清楚，下面結合本專利技術實施例中的附圖，對本專利技術實施例中的技術方案進行清楚完整的描述：如圖1所示的一種基于AR虛擬現實技術的整形手術實時捕捉系統，包括圖像采集單元,采集人體需要進行整形部位的圖像信息；AR呈現單元，接收所述圖像采集單元傳送的人體需要整形部位的真實圖像信息結合影像辨識技術展現該人體部位的虛擬圖像，所述AR呈現單元讀取該人體部位的特征點信息將不同的整形模型投射、疊加到該部位進行虛擬現實展示，同時通過攝像頭捕捉人體的影像信息,該人體部位的3D影像將以360度形式在患者的身體上顯示；數據分析單元，與所述AR呈現單元實時數據通信，工作狀態下：當AR呈現單元為人體部位進行整形手術佩戴整形模型時所述數據分析單元根據人體的五官特征對每次佩戴的整形模型進行合理性分析整理出器官的曲線是否符合標準狀態并繪制出整形后的圖像；整形體驗單元，接收所述數據分析單元傳送的數據信息根據上述選擇的整形模型以及人體需要整形的部位進行整形體驗，所述整形體驗單元調取其內部存儲的整形工具以及該整形過程中具體細節制作出整體整形流程并生成整形視頻；首先將每個動作圖像進行顏色空間轉換，再采用MeanShift算法通過迭代尋優方式，找到概率分布的極值來定位每一個動作過程，將視頻圖像的所有幀做MeanShift運算，搜索到每一個步驟的中心位置。通過對每一個步驟進行中心定位方便我們對每一個詳細的步驟進行具體分析和觀察，進行詳細的動作捕捉。該系統還包括與AR呈現單元進行實時數據通信的終端單元，所述AR呈現單元將用戶選擇的整形模型以及該整形調整下用戶的人體具體外部圖像實時傳送至終端單元。通過終端單元我們可以將整形后的形象進行遠程傳輸，傳送給其他的朋友或者服務終端進行分析和美感體驗。所述AR呈現單元包括存儲有與人體的多個器官進行配套的整形模型的存儲模塊和映射模塊，在AR呈現單元為人體的器官進行整形展現時，所述映射模塊實時對人體的實際器官的邊緣部位與模型的邊緣部位進行無縫對接。采用無縫對接技術這樣可以得到更加真實的圖像信息，并且醫護人員觀看到對接方式可以幫助醫護人員更好的進行整形手術，增加整形手術的成功性和完美性。進一步的，所述數據分析單元包括存儲有基于人體美學技術的人體各個面部器官和人體多個器官協調比例信息的數據模塊和分析建議模塊，所述分析建議模塊結合人體美學技術對整形后的人體表情進行數據化分析和美感建議。通過數據模塊我們可以調取其內部存儲的人體美學的相關知識，例如用戶選取了一種類型的整形手術但是不知道自己選取是否合格或者自己選取的是否美觀然后我們可以調取分析建議模塊讓其對我們的整形后的圖像進行分析給出合理性的分析報告，供醫護人員和整形患者使用。所述整形體驗單元包括存儲有各個整形過程中使用的工具信息的元素存儲單元，所述元素存儲單元內存儲有各個工具的使用說明和與之匹配的手術類型以及該工具的操作手法，所述整形體驗單元還包括視頻體驗生成單元，所述視頻體驗生成單元根據選擇本文檔來自技高網...

【技術保護點】
一種基于AR虛擬現實技術的整形手術實時捕捉系統，其特征在于包括：圖像采集單元,采集人體需要進行整形部位的圖像信息；AR呈現單元，接收所述圖像采集單元傳送的人體需要整形部位的真實圖像信息結合影像辨識技術展現該人體部位的虛擬圖像，所述AR呈現單元讀取該人體部位的特征點信息將不同的整形模型投射、疊加到該部位進行虛擬現實展示，同時通過攝像頭捕捉人體的影像信息,該人體部位的3D影像將以360度形式在患者的身體上顯示；數據分析單元，與所述AR呈現單元實時數據通信，工作狀態下：當AR呈現單元為人體部位進行整形手術佩戴整形模型時所述數據分析單元根據人體的五官特征對每次佩戴的整形模型進行合理性分析整理出器官的曲線是否符合標準狀態并繪制出整形后的圖像；整形體驗單元，接收所述數據分析單元傳送的數據信息根據上述選擇的整形模型以及人體需要整形的部位進行整形體驗，所述整形體驗單元調取其內部存儲的整形工具以及該整形過程中具體細節制作出整體整形流程并生成整形視頻；工作狀態下：整形體驗單元采用CamShift算法對整形手術過程中的步驟進行跟蹤處理；首先將每個動作圖像進行顏色空間轉換，再采用MeanShift算法通過迭代尋優方式，找到概率分布的極值來定位每一個動作過程，將視頻圖像的所有幀做MeanShift運算，搜索到每一個步驟的中心位置；該系統還包括與AR呈現單元進行實時數據通信的終端單元，所述AR呈現單元將用戶選擇的整形模型以及該整形調整下用戶的人體具體外部圖像實時傳送至終端單元。...

【技術特征摘要】
1.一種基于AR虛擬現實技術的整形手術實時捕捉系統，其特征在于包括：圖像采集單元,采集人體需要進行整形部位的圖像信息；AR呈現單元，接收所述圖像采集單元傳送的人體需要整形部位的真實圖像信息結合影像辨識技術展現該人體部位的虛擬圖像，所述AR呈現單元讀取該人體部位的特征點信息將不同的整形模型投射、疊加到該部位進行虛擬現實展示，同時通過攝像頭捕捉人體的影像信息,該人體部位的3D影像將以360度形式在患者的身體上顯示；數據分析單元，與所述AR呈現單元實時數據通信，工作狀態下：當AR呈現單元為人體部位進行整形手術佩戴整形模型時所述數據分析單元根據人體的五官特征對每次佩戴的整形模型進行合理性分析整理出器官的曲線是否符合標準狀態并繪制出整形后的圖像；整形體驗單元，接收所述數據分析單元傳送的數據信息根據上述選擇的整形模型以及人體需要整形的部位進行整形體驗，所述整形體驗單元調取其內部存儲的整形工具以及該整形過程中具體細節制作出整體整形流程并生成整形視頻；工作狀態下：整形體驗單元采用CamShift算法對整形手術過程中的步驟進行跟蹤處理；首先將每個動作圖像進行顏色空間轉換，再采用MeanShift算法通過迭代尋優方式，找到概率分布的極值來定位每一個動作過程，將視頻圖像的所有幀做MeanShift運算，搜索到每一個步驟的中心位置；該系統還包括與AR呈現單元進行實時數據通信的終端單元，所述AR呈現單元將用戶選擇的整形模型以及該整形調整下用戶的人體具體外部圖像實時傳送至終端單元。2.根據權利要求1所述的一種基于AR虛擬現實技...

【專利技術屬性】
技術研發人員：童培誠，段會鋒，
申請(專利權)人：大連文森特軟件科技有限公司，
類型：發明
國別省市：遼寧;21