對于視頻中的3D和其他信息的集中式數據庫制造技術

給出了用于視頻中的3D和其他信息的集中式數據庫的方法和系統。該集中式數據庫包含可以被查詢的并且在包括對象和聲音的添加和移除的視頻的編輯中使用的諸如相機、照明、聲音、對象、深度和注釋的視頻元數據。存儲在該集中式數據庫中的元數據可以對公眾開放并且準許貢獻者元數據。

【技術實現步驟摘要】
【國外來華專利技術】對于視頻中的3D和其他信息的集中式數據庫相關申請的交叉引用本申請是2010年10月25日提交的美國申請N0.12/911，688 (代理案號90619-786152 (008000US)(原來是026340-008000US))的繼續申請并要求該申請的權益，通過全部引用將其合并于此用于所有目的。
本專利技術的實施例總體上涉及視頻元數據的存儲和共享，具體地涉及集中的服務器，該集中的服務器存儲可以用于產生3-D圖像、以適當的照明和聲音效果從場景添加或移除對象、提供注釋或者編輯場景的諸如相機、照明、聲音、對象、深度和注釋數據的視頻元數據。可以由與視頻相關聯的各方或者由諸如因特網用戶的不相關的貢獻者提供元數據。
技術介紹
視頻產生技術現在可能不能存儲捕捉的元數據或者使得捕捉的元數據可能可用。視頻編輯技術通常手動完成，比如估計要被插入到現有視頻中的以藍色屏幕背景拍攝(film)的對象所需的光量。
技術實現思路
本專利技術的一個實施例指向一種方法，包括:接收要顯示在顯示器上的視頻數據，該視頻數據包括視頻標識符；利用該視頻標識符，為了存儲在服務器上的視頻元數據查詢該服務器，該視頻標識符標識該視頻元數據，并且該視頻元數據包括描述光源相對于捕捉該視頻數據的相機的位置的視頻照明位置元數據；從該服務器接收該視頻元數據，并且利用接收的視頻照明位置元數據編輯該視頻數據以產生編輯的視頻數據，其重新照明與該視頻照明位置元數據 一致的視頻數據；以及將編輯的視頻數據輸出到顯示器。 本專利技術的另一實施例進一步指向使用視頻元數據編輯場景的方法，其中該元數據包括照明數據、聲音數據、相機數據、對象分割數據、深度圖數據注釋數據。本專利技術的示例實施例指向從視頻數據移除對象的方法，以及其中應用該視頻照明位置元數據以確定與剩余的視頻數據的照明位置元數據一致的、在移除的對象之后的背旦o本專利技術的示例實施例指向向該視頻數據添加對象的方法，以及其中向添加的對象應用該視頻照明位置元數據以便其看起來就像是由該光源照明。本專利技術的示例實施例指向一種方法，其中該視頻數據的編輯分析相機數據和位置數據以組合由兩個或多個相機對于相同的場景捕捉的視頻數據，以創建一對立體圖像來呈現二維圖像。本專利技術的示例實施例指向一種方法，其中該視頻數據的編輯從該視頻移除聲音，以及其中應用該視頻元數據以便移除的聲音符合該聲音數據。本專利技術的示例實施例指向一種方法，其中使用對象分割數據、深度圖數據和注釋數據來標識要移除的對象。本專利技術的示例實施例指向一種系統，包括:播放器，接收要顯示在顯示器上的視頻數據，該視頻數據包括視頻標識符，該播放器為了視頻元數據利用該視頻標識符查詢服務器，該播放器從該服務器接收該視頻元數據，并且利用接收的視頻照明位置元數據編輯該視頻數據以產生編輯的視頻數據，其重新照明與該視頻照明位置元數據一致的視頻數據；服務器，存儲該視頻元數據，該視頻元數據包括描述光源相對于捕捉該視頻數據的相機的位置的視頻照明位置元數據；以及顯示器，用于顯示編輯的視頻。本專利技術的示例實施例指向用于修訂(revise)電影元數據數據庫的方法，該方法包括:從第一貢獻者接收對于視頻場景的第一元數據貢獻；將該第一元數據貢獻存儲在視頻元數據數據庫中；從第二貢獻者接收對于視頻場景的第二元數據貢獻，在該第一元數據貢獻之后接收該第二元數據貢獻；確定該第二元數據貢獻比該第一元數據貢獻更準確；以及用該第二元數據貢獻替換存儲在該視頻元數據數據庫上的該第一元數據貢獻的至少一部分。【附圖說明】通過參考以下附圖可以實現對本專利技術的特征和優點的進一步理解。在附圖中，類似的組件或特征具有相同的參考標記。圖1是根據示例實施例的用于視頻元數據的集中式數據庫系統的框圖。圖2是根據示例實施例的存儲在集中式數據庫中的視頻元數據的類型和組織的框圖。圖3是根據示例實施例的描述在哪里捕捉和記錄什么視頻元數據的示例設置。圖4是例示組合經過一時間段收集的兩個2-D圖像以產生3D圖像的圖。圖5A是根據示例實施例的場景的圖。圖5B是根據示例實施例的要素被添加和移除的圖5A的場景的圖。圖6是根據示例實施例的向視頻添加對象的處理流程。圖7是根據示例實施例的從視頻移除對象的處理流程。圖8是根據示例實施例的編輯場景的處理流程。圖9是適合與本專利技術的實施例一起使用的示例的計算機系統。現在將使用附圖來例示根據本專利技術的不同的實施例。這些圖是實施例的具體例子并且不應被理解為限制性的實施例，而是示例的形式和過程。【具體實施方式】存儲在致密盤上的音樂專輯可能包含專輯標識符，可以用于查詢集中的音樂專輯數據庫以訪問音樂專輯元數據，比如專輯名、各首歌曲標題和藝術家信息。然后可以向用戶或者收聽者顯示此音樂專輯元數據。類似地，可以通過視頻標識符標識視頻，該視頻標識符可以用于查詢視頻元數據。視頻元數據可以包括比音樂元數據多得多的數據，并且可以用于不同的目的，比如用于編輯視頻或者創建3-D圖像。因此，在本領域中可能存在對于用于視頻中的3-D和其他信息的集中式數據庫的需要。視頻元數據可以由愛好者訪問以由他們獨立地進行編輯或者由視頻播放器訪問以實時編輯電影。用于視頻元數據的集中式數據庫可以允許用戶或者觀看者查詢和接收可能提供有價值的視頻信息的元數據，并另外允許以與原始視頻的屬性一致這樣的方式編輯或顯示視頻。例如，可以根據描述如何照明其余場景的視頻元數據重新照明添加到場景的對象。集中式數據庫可以包含注釋數據和由與視頻的創建相關聯方提交的或者來自不相關的貢獻者的數據。關于相對于場景中的對象的相機位置和相機移動以及對象的移動的視頻元數據可以允許產生三維圖像和視頻。此外，照明和聲音元數據可以允許以適當的照明和聲音效果從場景中添加和去除對象和聲音。視頻元數據還可以允許編輯視頻的各種屬性，比如亮度、對比度等等。另外，對象元數據可以用于標識可以在編輯中使用的場景中的對象和人物(character )或者用于提供注釋。深度元數據、對象分割數據和其他視頻元數據可以用于進一步增強3-D效果或者輔助視頻編輯。在示例實施例中，描述在一個時間段相機相對于場景中的對象的運動的元數據可以用于產生兩個圖像:在較早時對象的一個圖像以及在稍晚時相同對象的另一圖像。這兩個圖像可以稍微不同并且可以與元數據結合使用來確定對象相對于相機和場景中的其他對象如何運動，以便產生可以作為三維圖像的基礎的一對立體圖像。在進一步的實施例中，諸如光類型、光強度和光源下對于場景的位置的照明數據允許以適當照明向場景添加諸如數字創建的對象的新對象。新對象也可以被添加到場景并且并入聲音數據以適當地創建新聲音。類似的技術可以用于從場景移除對象或聲音或者用于編輯場景的光和聲品質。在進一步的實施例中，幾何形狀(geometry)未知的對象可以被重新照明并且可以從其中對象是靜止的但是照射光源旋轉的一組參考圖像創建對象的可視外殼(visualhull)。在此技術中，對象的諸如多個靜止照片的多個參考圖像被組合以創建合成圖像。在每個參考圖像中，光源移動到稍微不同的位置。然后該組參考圖像被合并到合成圖像文件中，該合成圖像文件包含關于光源的位置以及在變化的照明條件下對象的反射率的信息。利用此照明元數據，能夠映射對象對光如何反應以及虛擬地重新照明對象。此合成圖像將顯示該圖像并允許光本文檔來自技高網...

【技術保護點】
一種方法，包括：接收要顯示在顯示器上的視頻數據，該視頻數據包括視頻標識符；利用該視頻標識符，為了存儲在服務器上的視頻元數據查詢該服務器，該視頻標識符標識該視頻元數據，并且該視頻元數據包括描述光源相對于捕捉該視頻數據的相機的位置的視頻照明位置元數據；從該服務器接收該視頻元數據，并且利用接收的視頻照明位置元數據編輯該視頻數據以產生編輯的視頻數據，其重新照明與該視頻照明位置元數據一致的視頻數據；以及將編輯的視頻數據輸出到顯示器。

【技術特征摘要】
【國外來華專利技術】2010.10.25 US 12/911,6881.一種方法，包括: 接收要顯示在顯示器上的視頻數據，該視頻數據包括視頻標識符； 利用該視頻標識符，為了存儲在服務器上的視頻元數據查詢該服務器，該視頻標識符標識該視頻元數據，并且該視頻元數據包括描述光源相對于捕捉該視頻數據的相機的位置的視頻照明位置元數據； 從該服務器接收該視頻元數據，并且利用接收的視頻照明位置元數據編輯該視頻數據以產生編輯的視頻數據，其重新照明與該視頻照明位置元數據一致的視頻數據；以及 將編輯的視頻數據輸出到顯示器。2.如權利要求1的方法,其中該視頻元數據包括照明數據、聲音數據、相機數據、對象分割數據、深度圖數據、合成數據和注釋數據。3.如權利要求1的方法，其中該視頻數據的編輯從該視頻數據移除對象，以及其中應用該視頻照明位置元數據以確定與剩余的視頻數據的照明位置元數據一致的、在移除的對象之后的背景。4.如權利要求1的方法，其中該視頻數據的編輯向該視頻數據添加對象，以及其中向添加的對象應用該視頻照明位置元數據以便其看起來就像是由該光源照明。5.如權利要求1的方法，其中該視頻數據的編輯通過分析該視頻照明位置元數據來重新照明該視頻數據以關于光源而照明該視頻數據。6.如權利要求2的方法，其中該視頻數據的編輯分析相機數據和位置數據以組合由兩個或更多個相機對于相同的場景捕捉的視頻數據，以創建一對立體圖像來呈現三維圖像。7.如權利要求2的方法，其中該視頻數據的編輯從該視頻移除聲音，以及其中應用該視頻元數據以便移除的聲音符合該聲音數據。8.如權利要求3的方法，其中使用對象分割數據、深度圖數據和注釋數據來標識要移除的對象。9.一種系統,包括: 播放器，接收要顯示在顯示器上的視頻數據，該視頻數據包括視頻標識符，該播放器為了視頻元數據利用該視頻標識符查詢服務器，該播放器從該服務器接收該視頻元數據，并且利用接收的視頻照明位置元數據編輯該視頻數據以產生編輯的視頻數據，其重新照明與該視頻照明位置元數據一致的視頻數...

【專利技術屬性】
技術研發人員：S奧斯曼，V斯塔梅特，
申請(專利權)人：索尼電腦娛樂公司，
類型：
國別省市：