本公開提供了為擴展現實生成逼真化身。呈現了一種用于通過電子設備生成用戶的逼真化身的方法。該方法包括通過至少一個顯示器向電子設備的用戶顯示幀序列。該幀序列包括第一幀、第二幀和第三幀，第一幀包括第一顏色分量，第二幀包括第二顏色分量，第三幀包括第三顏色分量。該方法包括在向用戶顯示幀序列的同時，通過一個或多個攝像頭捕獲用戶的多個圖像。該方法還包括針對該多個圖像中的每個圖像，確定第一顏色分量、第二顏色分量和第三顏色分量中的每一者的可見光波長，并且基于第一顏色分量、第二顏色分量和第三顏色分量中的每一者的可見光波長來生成用戶的逼真化身。
1、擴展現實是一種在呈現給用戶之前已經以某種方式進行了調整的現實形式，該現實形式可以包括例如虛擬現實(virtual?reality，vr)、增強現實(augmented?reality，ar)、混合現實(mixed?reality，mr)、混合現實(hybrid?reality)、或它們的某種組合和/或衍生物。擴展現實內容可以包括完全生成的內容、或與捕獲到的內容(例如，真實世界的照片)組合的生成的內容。擴展現實內容可以包括視頻、音頻、觸覺反饋、或它們的某種組合，并且它們中的任何一者都可以在單個通道或多個通道中呈現(例如，向觀看者產生三維效果的立體視頻)。擴展現實可以與應用、產品、附件、服務、或它們的某種組合相關聯，例如，這些應用、產品、附件、服務、或它們的某種組合用于在擴展現實中創建內容，和/或在擴展現實中使用(例如，在擴展現實中執行活動)。提供擴展現實內容的擴展現實系統可以在各種平臺上實現，這些平臺包括連接到主計算機系統的頭戴式顯示器(head-mounteddisplay，hmd)、獨立的hmd、移動設備或計算系統、或能夠向一位或多位觀看者提供擴展現實內容的任何其它硬件平臺。在一些擴展現實應用中，用戶可以手動創建化身，在用戶導航和體驗擴展現實環境時，該化身可以包括用戶的虛擬表示。然而，對于用戶來說，手動創建化身可能是耗時且復雜的，尤其是在用戶希望開始與工作相關的擴展現實應用或體驗、或其它類似的時間敏感的應用或體驗的情況下。
/>技術實現思路
1、本實施例涉及基于利用擴展現實(extended?reality，xr)顯示設備中的單色攝像頭獲得的、檢測到的或計算出的可見光波長來生成用戶的逼真化身的技術，這些單色攝像頭適用于眼動追蹤或面部追蹤。在某些實施例中，電子設備可以通過該電子設備的至少一個顯示器向該電子設備的用戶顯示幀序列。在一個實施例中，幀序列可以包括第一幀、第二幀和第三幀，第一幀包括第一顏色分量，第二幀包括第二顏色分量，第三幀包括第三顏色分量。例如，在一些實施例中，第一顏色分量可以包括紅色分量，第二顏色分量可以包括綠色分量，并且第三顏色分量可以包括藍色分量。在某些實施例中，第一幀可以僅包括紅色分量，第二幀可以僅包括綠色分量，并且第三幀可以僅包括藍色分量。
2、在某些實施例中，代替向用戶顯示幀序列，電子設備可以通過該電子設備的多個光源將光脈沖序列投射到用戶上。例如，光脈沖序列可以包括第一光脈沖、第二光脈沖和第三光脈沖幀(例如，第三光脈沖)，第一光脈沖僅包括紅色分量，第二光脈沖僅包括綠色分量，第三光脈沖幀僅包括藍色分量。在一個實施例中，該多個光源可以包括多個發光二極管(light-emitting?diode，led)。在某些實施例中，在向用戶顯示幀序列的同時，電子設備然后可以通過該電子設備的一個或多個攝像頭捕獲用戶的多個圖像。例如，在一些實施例中，通過一個或多個攝像頭捕獲用戶的多個圖像可以包括：在顯示包括紅色分量的第一幀的同時，捕獲該用戶的多個圖像中的第一圖像；在顯示包括綠色分量的第二幀的同時，捕獲該用戶的多個圖像中的第二圖像；以及在顯示包括藍色分量的第三幀的同時，捕獲該用戶的多個圖像中的第三圖像。
3、在某些實施例中，電子設備然后可以針對該用戶的多個圖像中的每個圖像，確定第一顏色分量、第二顏色分量和第三顏色分量中的每一者的可見光波長。例如，電子設備可以確定關于第一圖像的紅色分量的可見光波長、關于第二圖像的綠色分量的可見光波長、以及關于第三圖像的藍色分量的可見光波長。在某些實施例中，針對該用戶的多個圖像中的每一者確定可見光波長可以包括：為用戶的多個特征中的每個特征確定顏色。例如，在一些實施例中，該用戶的多個特征可以包括以下中的一者或多者：用戶的眼睛顏色、用戶的頭發顏色、用戶的皮膚膚色、用戶的面部毛發顏色或用戶的臉頰膚色。
4、在某些實施例中，電子設備然后可以基于紅色分量、綠色分量和藍色分量中的每一者的可見光波長，來生成用戶的逼真化身。例如，在一些實施例中，生成用戶的逼真化身可以包括：基于紅色分量、綠色分量和藍色分量中的每一者的可見光波長，來對該用戶的多個圖像進行組合。在某些實施例中，電子設備還可以基于紅色分量、綠色分量和藍色分量中的每一者的可見光波長來確定用戶的心率。在某些實施例中，電子設備還可以基于紅色分量、綠色分量和藍色分量中的每一者的可見光波長來確定用戶的血氧水平。
5、本文所公開的實施例僅是示例，并且本公開的范圍不限于這些實施例。某些實施例可以包括以上所公開的實施例中的各部件、各元素、各特征、各功能、各操作或各步驟中的全部、一些，或者可以不包括本文中所公開的實施例的各部件、各元素、各特征、各功能、各操作或各步驟。涉及方法、存儲介質、系統和計算機程序產品的所附權利要求尤其公開了根據本專利技術的實施例，其中，在一個權利要求類別(例如，方法)中提到的任何特征也可以在另一個權利要求類別(例如，系統)中要求保護。所附權利要求書中的從屬關系或回引是僅出于形式原因而選擇的。然而，也可以對從對任何先前的權利要求(特別是多個從屬權利要求)的有意引用中產生的任何主題要求保護，使得多個權利要求及其多個特征的任何組合無論在所附權利要求書中所選擇的從屬關系如何、都被公開且可以被要求保護?？梢砸蟊Ｗo的主題不僅包括所附權利要求書中所陳述的特征的組合，還包括權利要求書中的特征的任何其它組合，其中，在權利要求書中所提到的每個特征可以與權利要求書中的任何其它特征或其它特征的組合進行組合。此外，本文所描述或所描繪的實施例和特征中的任何可以在單獨的權利要求中要求保護，和/或在與本文所描述或所描繪的任何實施例或特征的任何組合中或在與所附權利要求書中的任何特征的任何組合中要求保護。
本文檔來自技高網...
【技術保護點】
1.一種用于生成用戶的逼真化身的方法，所述方法包括，由電子設備：
2.根據權利要求1所述的方法，其中：
3.根據權利要求2所述的方法，其中：
4.根據權利要求1所述的方法，其中，針對所述用戶的所述多個圖像中的每個圖像確定所述可見光波長包括：確定所述用戶的多個特征中的每個特征的顏色。
5.根據權利要求4所述的方法，其中，所述用戶的所述多個特征包括以下中的一者或多者：所述用戶的眼睛顏色、所述用戶的頭發顏色、所述用戶的皮膚膚色、所述用戶的面部毛發顏色或所述用戶的臉頰膚色。
6.根據權利要求1所述的方法，其中，生成所述用戶的所述逼真化身包括：基于所述第一顏色分量、所述第二顏色分量和所述第三顏色分量中的每一者的所述可見光波長，來對所述用戶的所述多個圖像進行組合。
7.根據權利要求1所述的方法，還包括：
8.根據權利要求7所述的方法，其中，所述多個光源包括多個發光二極管LED。
9.根據權利要求1所述的方法，其中，通過所述一個或多個攝像頭捕獲所述用戶的所述多個圖像還包括：
10.根據權利要求1所述的方法，還包括：基于所述第一顏色分量、所述第二顏色分量和所述第三顏色分量中的每一者的所述可見光波長，來確定所述用戶的心率。
11.根據權利要求1所述的方法，還包括：基于所述第一顏色分量、所述第二顏色分量和所述第三顏色分量中的每一者的所述可見光波長，來確定所述用戶的血氧水平。
12.一種電子設備，包括：
13.根據權利要求12所述的電子設備，其中：
14.根據權利要求13所述的電子設備，其中：
15.根據權利要求12所述的電子設備，其中，用于針對所述用戶的所述多個圖像中的每個圖像確定所述可見光波長的指令還包括：用于為所述用戶的多個特征中的每個特征確定顏色的指令。
16.根據權利要求15所述的電子設備，其中，所述用戶的所述多個特征包括以下中的一者或多者：所述用戶的眼睛顏色、所述用戶的頭發顏色、所述用戶的皮膚膚色、所述用戶的面部毛發顏色或所述用戶的臉頰膚色。
17.根據權利要求12所述的電子設備，其中，用于生成所述用戶的逼真化身的指令還包括：用于基于所述第一顏色分量、所述第二顏色分量和所述第三顏色分量中的每一者的所述可見光波長，來對所述用戶的所述多個圖像進行組合的指令。
18.根據權利要求12所述的電子設備，其中，所述指令還包括用于如下項的指令：
19.根據權利要求12所述的電子設備，其中，用于通過所述一個或多個攝像頭捕獲所述用戶的所述多個圖像的指令還包括用于如下項的指令：
20.一種非暫態計算機可讀介質，所述非暫態計算機可讀介質包括指令，所述指令在由電子設備的一個或多個處理器執行時，使得所述電子設備：
...
【技術特征摘要】
1.一種用于生成用戶的逼真化身的方法，所述方法包括，由電子設備：
2.根據權利要求1所述的方法，其中：
3.根據權利要求2所述的方法，其中：
4.根據權利要求1所述的方法，其中，針對所述用戶的所述多個圖像中的每個圖像確定所述可見光波長包括：確定所述用戶的多個特征中的每個特征的顏色。
5.根據權利要求4所述的方法，其中，所述用戶的所述多個特征包括以下中的一者或多者：所述用戶的眼睛顏色、所述用戶的頭發顏色、所述用戶的皮膚膚色、所述用戶的面部毛發顏色或所述用戶的臉頰膚色。
6.根據權利要求1所述的方法，其中，生成所述用戶的所述逼真化身包括：基于所述第一顏色分量、所述第二顏色分量和所述第三顏色分量中的每一者的所述可見光波長，來對所述用戶的所述多個圖像進行組合。
7.根據權利要求1所述的方法，還包括：
8.根據權利要求7所述的方法，其中，所述多個光源包括多個發光二極管led。
9.根據權利要求1所述的方法，其中，通過所述一個或多個攝像頭捕獲所述用戶的所述多個圖像還包括：
10.根據權利要求1所述的方法，還包括：基于所述第一顏色分量、所述第二顏色分量和所述第三顏色分量中的每一者的所述可見光波長，來確定所述用戶的心率。
11.根據權利要求1所述的方法，還包括：基于所述第一顏色分量、所述第二顏色分量和...
【專利技術屬性】
技術研發人員：約翰·恩德斯·羅伯遜，
申請(專利權)人：元平臺公司，
類型：發明
國別省市：
還沒有人留言評論。發表了對其他瀏覽者有用的留言會獲得科技券。