實現增強現實應用的方法及設備技術

本發明專利技術公開了一種實現增強現實應用的方法，包括：收集用戶上傳的圖片和所述圖片的標簽信息；根據所述用戶在互聯網的社交圖譜和興趣圖譜，發布所述圖片和所述標簽信息給所述用戶的社交網絡聯系人，獲得所述社交網絡聯系人對所述圖片的評論信息；從所述評論信息中提取出現頻率大于第一門限值的關鍵詞；根據所述圖片的標簽信息和所述關鍵詞，將所述圖片添加到一圖片集；根據所述圖片集內所有圖片的圖像特征和所述關鍵詞，生成所述圖片所描述對象的增強現實模式和增強現實內容。本發明專利技術還公開了一種實現增強現實應用的設備。本發明專利技術實施例能夠解決增強現實應用中對無標記物環境中隨機對象的識別問題。

Method and apparatus for implementing augmented reality applications

The invention discloses a method for enhancing practical application, including: collecting users to upload pictures and the picture label information; the user according to the social graph and the map of interest in the Internet, social networking contacts released the pictures and the tag information to the user, the social network the picture comment contact information; extraction frequency is greater than the first threshold value of the keywords from the comment information; according to the picture label information and the keywords, and adding the picture to a picture set; according to the picture set image features all the pictures and the key generation the picture describes the object model augmented reality and augmented reality content. The invention also discloses a device for realizing augmented reality application. The embodiment of the invention can solve the recognition problem of random objects in unmarked environment in augmented reality applications.

【技術實現步驟摘要】
實現增強現實應用的方法及設備
本專利技術涉及計算機
，尤其涉及一種實現增強現實應用的方法及設備。
技術介紹
增強現實(AugmentedReality，簡稱AR)的概念產生于20世紀90年代。1994年，保羅·米爾格拉姆(PaulMilgram)和岸野文郎(FumioKishino)提出現實-虛擬連續統一體(Milgram′sReality-VirtualityContinuum)，他們將真實環境和虛擬環境分別作為連續系統的兩端，位于它們中間的被稱為“混合現實(MixedReality)”。其中靠近真實環境的是增強現實(AugmentedReality)，靠近虛擬環境的則是增強虛境(AugmentedVirtuality)。增強現實AR是一種用于幫助人們以更直觀、更形象的方式獲取關于現實世界中物體的相關信息的技術。增強現實應用(簡稱AR應用)的處理流程可以簡單描述為感知、識別、匹配和渲染四個步驟，具體如下：感知，是指用戶使用終端設備提供的攝像頭和各種傳感器感知身邊真實世界中的各種對象，采集圖片或圖像、位置、方向、速度、溫度、光照強度等等各種參數，供AR軟件使用。識別，是指AR軟件處理傳感器所收集的數據，例如，對攝像頭捕捉到的圖片進行分析和處理，嘗試識別出照片中的對象。AR軟件將從圖片中提取到的對象特征模式，與本地或者在線的模式庫中保存的模式進行匹配，如果匹配到則識別成功，否則識別失敗。匹配，是指識別成功后，AR軟件準備好與某個模式相關的多媒體內容，如圖文信息、音視頻、3D模型等等。這些媒體信息可以保存在終端本地，也可以在線獲得。渲染，是指AR軟件將多媒體內容同攝像頭捕獲的真實世界影像合并起來，渲染在用戶的終端顯示設備上。目前，針對標志性建筑物、書籍、著名畫作、條碼、商標和文本等特殊類型的圖片，AR應用具有很好的識別效果。然而，對于不屬于上述特殊類型的圖片，AR應用的識別成功率不高，其可識別對象的種類有限，應用場景是受限制的。
技術實現思路
本專利技術實施例的多個方面提供了一種實現增強現實應用的方法及設備，能夠解決增強現實應用中對無標記物環境中隨機對象的識別問題。第一方面，本專利技術實施例提供了一種實現增強現實應用的方法，包括：收集用戶上傳的圖片和所述圖片的標簽信息；根據所述用戶在互聯網的社交圖譜和興趣圖譜，發布所述圖片和所述標簽信息給所述用戶的社交網絡聯系人，獲得所述社交網絡聯系人對所述圖片的評論信息；從所述評論信息中提取出現頻率大于第一門限值的關鍵詞；根據所述圖片的標簽信息和所述關鍵詞，將所述圖片添加到一圖片集；根據所述圖片集內所有圖片的圖像特征和所述關鍵詞，生成所述圖片所描述對象的增強現實模式和增強現實內容。結合第一方面，在第一種實現方式下，所述標簽信息包括所述圖片所描述對象的地理位置信息；則所述根據所述圖片的標簽信息和所述關鍵詞，將所述圖片添加到一圖片集，包括：根據所述圖片所描述對象的地理位置信息，將所述圖片添加到圖片庫中，所述圖片庫內的圖片所描述對象具有相同的地理位置信息，所述圖片庫內包含有至少一個圖片集；根據所述關鍵詞，將所述圖片添加到所述圖片庫的一圖片集中，所述圖片集內的圖片具有相同的關鍵詞。結合第一方面或第一方面的第一種實現方式，在第二種實現方式下，所述根據所述圖片集內所有圖片的圖像特征和所述關鍵詞，生成所述圖片所描述對象的增強現實模式和增強現實內容，包括：從所述圖片集內所有圖片中提取圖像特征，根據所述圖像特征確定共有圖像特征；所述共有圖像特征是指所述圖片集內超過第一百分比的圖片都具有的圖像特征；結合所述共有圖像特征和所述關鍵詞，生成所述圖片所描述對象的增強現實模式，并添加到可識別模式庫中；根據所述關鍵詞，從搜索引擎或者第三方內容提供商獲得所述圖片所描述對象的增強現實內容；建立所述增強現實內容與所述增強現實模式的關聯關系，并將所述增強現實內容添加到增強現實內容庫。結合第一方面的第二種實現方式，在第三種實現方式下，在生成圖片所描述對象的增強現實模式和增強現實內容之后，還包括：接收用戶發送的增強現實應用服務請求消息，所述增強現實應用服務請求消息包含待識別的圖片和所述圖片的標簽信息；根據所述待識別的圖片的圖像特征和/或所述標簽信息，從所述可識別模式庫中搜索所述待識別的圖片所描述對象的增強現實模式；若搜索到所述待識別的圖片所描述對象的增強現實模式，根據所述增強現實模式從增強現實內容庫中獲取相關聯的增強現實內容，將所述增強現實內容發送給所述用戶；若搜索不到相關的增強現實模式，將所述待識別的圖片標記為不可識別的圖片。結合第一方面的第三種實現方式，在第四種實現方式下，在所述收集用戶上傳的圖片和所述圖片的標簽信息的步驟中，所收集的圖片是用戶上傳的被標記為不可識別的圖片。第二方面，本專利技術實施例提供了一種實現增強現實應用的設備，包括：圖片收集單元，用于收集用戶上傳的圖片和所述圖片的標簽信息；評論獲取單元，用于根據所述用戶在互聯網的社交圖譜和興趣圖譜，發布所述圖片和所述標簽信息給所述用戶的社交網絡聯系人，獲得所述社交網絡聯系人對所述圖片的評論信息；關鍵詞獲取單元，用于從所述評論信息中提取出現頻率大于第一門限值的關鍵詞；圖片歸類單元，用于根據所述圖片的標簽信息和所述關鍵詞，將所述圖片添加到一圖片集；和，增強現實處理單元，用于根據所述圖片集內所有圖片的圖像特征和所述關鍵詞，生成所述圖片所描述對象的增強現實模式和增強現實內容。結合第二方面，在第一種實現方式下，所述標簽信息包括所述圖片所描述對象的地理位置信息；所述圖片歸類單元包括：第一歸類子單元，用于根據所述圖片所描述對象的地理位置信息，將所述圖片添加到圖片庫中，所述圖片庫內的圖片所描述對象具有相同的地理位置信息，所述圖片庫內包含有至少一個圖片集；和，第二歸類子單元，用于根據所述關鍵詞，將所述圖片添加到所述圖片庫的一圖片集中，所述圖片集內的圖片具有相同的關鍵詞。結合第二方面或第二方面的第一種實現方式，在第二種實現方式下，所述增強現實處理單元包括：圖像優選子單元，用于從所述圖片集內所有圖片中提取圖像特征，根據所述圖像特征確定共有圖像特征；所述共有圖像特征是指所述圖片集內超過第一百分比的圖片都具有的圖像特征；增強現實模式生成子單元，用于結合所述共有圖像特征和所述關鍵詞，生成所述圖片所描述對象的增強現實模式，并添加到可識別模式庫中；增強現實內容獲取子單元，用于根據所述關鍵詞，從搜索引擎或者第三方內容提供商獲得所述圖片所描述對象的增強現實內容；和，增強現實內容存儲子單元，用于建立所述增強現實內容與所述增強現實模式的關聯關系，并將所述增強現實內容添加到增強現實內容庫。結合第二方面的第二種實現方式，在第三種實現方式下，所述設備還包括：請求接收單元，用于接收用戶發送的增強現實應用服務請求消息，所述增強現實應用服務請求消息包含待識別的圖片和所述圖片的標簽信息；增強現實模式匹配單元，用于根據所述待識別的圖片的圖像特征和/或所述標簽信息，從所述可識別模式庫中搜索所述待識別的圖片所描述對象的增強現實模式；增強現實內容提供單元，用于若搜索到所述待識別的圖片所描述對象的增強現實模式，根據所述增強現實模式從增強現實內容庫中獲取相關聯的增強現實內容，將所述增強現實內容發送給所述用戶；和，圖片本文檔來自技高網...

【技術保護點】
一種實現增強現實應用的方法，其特征在于，包括：收集用戶上傳的圖片和所述圖片的標簽信息；根據所述用戶在互聯網的社交圖譜和興趣圖譜，發布所述圖片和所述標簽信息給所述用戶的社交網絡聯系人，獲得所述社交網絡聯系人對所述圖片的評論信息；從所述評論信息中提取出現頻率大于第一門限值的關鍵詞；根據所述圖片的標簽信息和所述關鍵詞，將所述圖片添加到一圖片集；根據所述圖片集內所有圖片的圖像特征和所述關鍵詞，生成所述圖片所描述對象的增強現實模式和增強現實內容。

【技術特征摘要】
1.一種實現增強現實應用的方法，其特征在于，包括：收集用戶上傳的圖片和所述圖片的標簽信息；根據所述用戶在互聯網的社交圖譜和興趣圖譜，發布所述圖片和所述標簽信息給所述用戶的社交網絡聯系人，獲得所述社交網絡聯系人對所述圖片的評論信息；從所述評論信息中提取出現頻率大于第一門限值的關鍵詞；根據所述圖片的標簽信息和所述關鍵詞，將所述圖片添加到一圖片集；根據所述圖片集內所有圖片的圖像特征和所述關鍵詞，生成所述圖片所描述對象的增強現實模式和增強現實內容。2.如權利要求1所述的實現增強現實應用的方法，其特征在于，所述標簽信息包括所述圖片所描述對象的地理位置信息；則所述根據所述圖片的標簽信息和所述關鍵詞，將所述圖片添加到一圖片集，包括：根據所述圖片所描述對象的地理位置信息，將所述圖片添加到圖片庫中，所述圖片庫內的圖片所描述對象具有相同的地理位置信息，所述圖片庫內包含有至少一個圖片集；根據所述關鍵詞，將所述圖片添加到所述圖片庫的一圖片集中，所述圖片集內的圖片具有相同的關鍵詞。3.如權利要求1或2所述的實現增強現實應用的方法，其特征在于，所述根據所述圖片集內所有圖片的圖像特征和所述關鍵詞，生成所述圖片所描述對象的增強現實模式和增強現實內容，包括：從所述圖片集內所有圖片中提取圖像特征，根據所述圖像特征確定共有圖像特征；所述共有圖像特征是指所述圖片集內超過第一百分比的圖片都具有的圖像特征；結合所述共有圖像特征和所述關鍵詞，生成所述圖片所描述對象的增強現實模式，并添加到可識別模式庫中；根據所述關鍵詞，從搜索引擎或者第三方內容提供商獲得所述圖片所描述對象的增強現實內容；建立所述增強現實內容與所述增強現實模式的關聯關系，并將所述增強現實內容添加到增強現實內容庫。4.如權利要求3所述的實現增強現實應用的方法，其特征在于，在生成圖片所描述對象的增強現實模式和增強現實內容之后，還包括：接收用戶發送的增強現實應用服務請求消息，所述增強現實應用服務請求消息包含待識別的圖片和所述圖片的標簽信息；根據所述待識別的圖片的圖像特征和/或所述標簽信息，從所述可識別模式庫中搜索所述待識別的圖片所描述對象的增強現實模式；若搜索到所述待識別的圖片所描述對象的增強現實模式，根據所述增強現實模式從增強現實內容庫中獲取相關聯的增強現實內容，將所述增強現實內容發送給所述用戶；若搜索不到相關的增強現實模式，將所述待識別的圖片標記為不可識別的圖片。5.如權利要求4所述的實現增強現實應用的方法，其特征在于，在所述收集用戶上傳的圖片和所述圖片的標簽信息的步驟中，所收集的圖片是用戶上傳的被標記為不可識別的圖片。6.一種實現增強現實應用的設備，其特征在于，包括：圖片收集單元...

【專利技術屬性】
技術研發人員：李國慶，
申請(專利權)人：華為終端有限公司，
類型：發明
國別省市：廣東,44