成像裝置和電子設備制造方法及圖紙

本發明專利技術涉及成像裝置和電子設備。其中，成像裝置可包括：成像單元，所述成像單元中二維地布置有多個像素，且所述成像單元拍攝圖像；信號處理器，所述信號處理器執行針對基于從所述成像單元輸出的被攝圖像的數據的信號處理的至少一部分；輸出I/F，所述輸出I/F將所述信號處理的信號處理結果或中間數據，以及所述被攝圖像輸出至外部；和輸出控制處理器，所述輸出控制處理器將所述信號處理器的所述信號處理結果和所述被攝圖像中的至少一者從所述輸出I/F輸出至外部。

【技術實現步驟摘要】
成像裝置和電子設備本申請是申請日為2017年9月1日、專利技術名稱為“成像裝置和電子設備”的申請號為201780055363.7的專利申請的分案申請。
本專利技術涉及成像裝置和電子設備，特別地，涉及能夠使用于輸出用戶所需信息的成像裝置的構造小型化的成像裝置和電子設備。
技術介紹
已經提出了如下的成像裝置作為拍攝圖像的成像裝置，在所述成像裝置中，諸如傳感器芯片、存儲器芯片和數字信號處理器(DSP)芯片等芯片使用多個凸塊(bump)并行地連接(例如，參見專利文獻1)。引用列表專利文獻專利文獻1：特開號為2008-048313的日本專利申請
技術實現思路
本專利技術要解決的技術問題在使用凸塊來連接芯片以構造與專利文獻1所述的成像裝置一樣的成像裝置的情況下，成像裝置的厚度增加且成像裝置的尺寸增大。另一方面，使用成像裝置的用戶可能需要由成像裝置拍攝的圖像，且也可能需要從圖像獲取的信息(元數據)而不是圖像本身?？紤]到上述情況做出本專利技術，本專利技術的目的是使的能夠實現具有小尺寸的能夠輸出用戶所需信息的成像裝置的構造。技術問題的解決方案根據本專利技術的成像裝置是單片式成像裝置，其包括：成像單元，成像單元中二維布置有多個像素，且成像單元對圖像進行拍攝；信號處理單元，信號處理單元使用從成像單元輸出的被攝圖像進行信號處理；輸出I/F(interface，接口)，輸出I/F將信號處理的信號處理結果和被攝圖像輸出至外部；和輸出控制單元，輸出控制單元進行這樣的輸出控制：將信號處理的信號處理結果和被攝圖像選擇性地從輸出I/F輸出至外部。根據本專利技術的電子設備是包括該成像裝置的電子設備。在根據本專利技術的成像裝置和電子設備中，使用從成像單元(其中，二維布置有多個像素來對圖像進行拍攝)輸出的被攝圖像進行信號處理，且將信號處理的信號處理結果和被攝圖像選擇性地從輸出I/F輸出至外部，該輸出I/F將信號處理的信號處理結果和被攝圖像輸出至外部。成像裝置可以是獨立裝置，或可以是構成獨立裝置的內部模塊。本專利技術的有益效果根據本專利技術，能夠實現具有小尺寸的能夠輸出用戶所需信息的成像裝置的構造。順便提及地，此處描述的效果不是限制性的，且能夠實現本說明書中所述的任何效果。附圖說明圖1是圖示了根據本專利技術的數碼相機的實施例的構造例的框圖。圖2是圖示了成像裝置2的構造例的框圖。圖3是圖示了成像裝置2的概要構造的示例的立體圖。圖4說明了在進行識別處理作為DSP32的信號處理的情況下的成像裝置2的處理的示例的概要。圖5說明了在進行識別處理作為DSP32的信號處理的情況下的成像裝置2的處理的示例的概要。圖6說明了在進行識別處理作為DSP32的信號處理的情況下的成像裝置2的處理的示例的概要。圖7是說明了在進行識別處理作為DSP32的信號處理的情況下的成像裝置2的處理時間的第一示例的時序圖。圖8是說明了在進行識別處理作為DSP32的信號處理的情況下的成像裝置2的處理時間的第二示例的時序圖。圖9是說明了在進行識別處理作為DSP32的信號處理的情況下的成像裝置2的處理時間的第三示例的時序圖。圖10是說明了在進行識別處理作為DSP32的信號處理的情況下的成像裝置2的處理時間的第四示例的時序圖。圖11說明了在進行融合處理作為DSP32的信號處理的情況下的成像裝置2的處理的示例的概要。圖12說明了在進行融合處理作為DSP32的信號處理的情況下的成像裝置2的處理的示例的概要。圖13說明了在進行融合處理作為DSP32的信號處理的情況下的成像裝置2的處理的示例的概要。圖14是說明了在進行融合處理作為DSP32的信號處理的情況下的成像裝置2的處理時間的第一示例的時序圖。圖15是說明了在進行融合處理作為DSP32的信號處理的情況下的成像裝置2的處理時間的第二示例的時序圖。圖16說明了在進行SLAM處理作為DSP32的信號處理的情況下的成像裝置2的處理的示例的概要。圖17說明了在進行SLAM處理作為DSP32的信號處理的情況下的成像裝置2的處理的示例的概要。圖18說明了在進行SLAM處理作為DSP32的信號處理的情況下的成像裝置2的處理的示例的概要。圖19是說明了在進行SLAM處理作為DSP32的信號處理的情況下的成像裝置2的處理時間的第一示例的時序圖。圖20是說明了在進行SLAM處理作為DSP32的信號處理的情況下的成像裝置2的處理時間的第二示例的時序圖。圖21是說明了在進行SLAM處理作為DSP32的信號處理的情況下的成像裝置2的處理時間的第三示例的時序圖。圖22是圖示了成像裝置2的其他構造示例的框圖。圖23圖示了成像裝置2的使用示例。圖24是示意性地圖示了車輛控制系統的構造例的框圖。圖25圖示了成像單元的安裝位置的示例。具體實施方式<根據本專利技術的數碼相機的實施例>圖1是圖示了根據本專利技術的數碼相機的實施例的構造例的框圖。順便提及地，數碼相機能夠拍攝靜態圖像和動態圖像中的任一者。在圖1中，數碼相機包括光學系統1、成像裝置2、存儲器3、信號處理單元4、輸出單元5和控制單元6。光學系統1例如包括未圖示的變焦鏡頭、聚焦鏡頭和孔徑光闌等，并且使得外部光能夠入射至成像裝置2。成像裝置2例如是由單個芯片構成的互補金屬氧化物半導體(CMOS)圖像傳感器，并且用來接收來自光學系統1的入射光，以進行光電轉換以及輸出與來自光學系統1的入射光對應的圖像數據。此外，成像裝置2例如使用圖像數據等進行識別預定識別對象的識別處理以及其他信號處理，并且輸出信號處理的信號處理結果。存儲器3臨時存儲從成像裝置2輸出的圖像數據等。信號處理單元4必要時使用存儲在存儲器3中的圖像數據進行諸如噪聲去除和白平衡調整等處理作為相機信號處理，并且將處理結果輸出至輸出單元5。輸出單元5輸出來自信號處理單元4的圖像數據或存儲在存儲器3中的信號處理結果。即，輸出單元5例如包括含有液晶等的顯示器(未圖示)，并且將與來自信號處理單元4的圖像數據對應的圖像顯示為所謂的直通圖像(throughimage)。此外，輸出單元5例如包括對諸如半導體存儲器、磁盤或光盤等記錄介質進行驅動的驅動器(未圖示)，并且將來自信號處理單元4的圖像數據或存儲在存儲器3中的信號處理結果記錄在記錄介質上。此外，輸出單元5例如起到與外部裝置之間進行數據傳輸的接口(I/F)的作用，并且將來自信號處理單元4的圖像數據或記錄在記錄介質上的圖像數據等傳輸至外部裝置?？刂茊卧?響應于用戶的操作等來控制數碼相機的構成模塊。在具有上述構造的數碼相機中，成像裝置2對圖像進行拍攝。即，成像裝置2接收來自光學系統1的入射光，進行光電轉換，獲取與入射光對應的圖像數據，且輸出圖像數據。...

【技術保護點】
1.一種成像裝置，其包括：/n成像單元，所述成像單元中二維地布置有多個像素，且所述成像單元拍攝圖像；/n信號處理器，所述信號處理器執行針對基于從所述成像單元輸出的被攝圖像的數據的信號處理的至少一部分；/n輸出I/F，所述輸出I/F將所述信號處理的信號處理結果或中間數據，以及所述被攝圖像輸出至外部；和/n輸出控制處理器，所述輸出控制處理器將所述信號處理器的所述信號處理結果和所述被攝圖像中的至少一者從所述輸出I/F輸出至外部。/n

【技術特征摘要】
20160916 JP 2016-1811941.一種成像裝置，其包括：
成像單元，所述成像單元中二維地布置有多個像素，且所述成像單元拍攝圖像；
信號處理器，所述信號處理器執行針對基于從所述成像單元輸出的被攝圖像的數據的信號處理的至少一部分；
輸出I/F，所述輸出I/F將所述信號處理的信號處理結果或中間數據，以及所述被攝圖像輸出至外部；和
輸出控制處理器，所述輸出控制處理器將所述信號處理器的所述信號處理結果和所述被攝圖像中的至少一者從所述輸出I/F輸出至外部。


2.根據權利要求1所述的成像裝置，其中，所述成像裝置具有堆疊結構，在所述堆疊結構中堆疊有多個晶片。


3.根據權利要求1所述的成像裝置，其中，所述信號處理包括深度學習過程。


4.根據權利要求1所述的成像裝置，其中，所述成像裝置具有用于存儲由所述信號處理器執行的程序的存儲器，
其中，所述存儲器設置在與設置有所述成像單元的基板不同的基板上。


5.根據權利要求1所述的成像裝置，其中，所述成像單元和所述信號處理器布置在單一芯片上。


6.根據權利要求1所述的成像裝置，其中，所述信號處理器執行的所述信號處理是識別處理。


7.根據權利要求1所述的成像裝置，其中，所述信號處理器執行的所述信號處理是融合處理。


8.根據權利要求1所述的成像裝置，其中，所述信號處理器執行的所述信號處理是同時定位和構建地圖處理。


9.根據權利要求1所述的成像裝置，還包括圖像壓縮單元，所述圖像壓縮單元壓縮所述被攝圖像并且生成壓縮圖像，所述壓縮圖像的數據量小于所述被攝圖像的數據量。


10.根據權利要求1所述的成像裝置，還包括第一通信I/F，所述第一通信I/F與所述外部交換將被從寄存器讀取的和將被寫入到所述寄存器的信息，所述寄存器存儲與所述被攝圖像的拍攝相關聯的成像信息。


11.根據權利要求1所述的成像裝置，其中，所述信號處理器執行程序，且所述成像裝置還包括第二通信I/F，所述第二通信I/F從所述外部下載由所述處理器執行的所述程序。


12.根據權利要求1所述的成像裝置，還包括輸入I/F，所述輸入I/F接收來自外部傳感器的外部傳感器輸出，
其中，所述信號處理器使用所述被攝圖像和所述外部傳感器輸出進行所述信號處理。


13.根據權利要求5所述的成像裝置，其中，
所述單一芯片包括結合在一起的第一基板和第二基板，
所述第一基板包括所述成像裝置，且
所述第二基板包括所述信號處理器。


14.根據權利要求13所述的成像裝置，其中，
所述成像裝置具有用于存儲由所述信號處理器執行的程序的存儲器，
所述單一芯片還包括第三基板，且
所述第三基板包括所述存儲器。


15.根據權利要求6所述的成像裝置，其中，
所述被攝圖像是通過對所述成像單元的輸出進行壓縮而生成的圖像，且
所述信號處理器執行針對通過所述壓縮而生成的圖像的所述識別處理的至少一部分。


16.根據權利要求1所述的成像裝置，其中
所述被攝圖像是通過對所述成像單元的輸出執行分層級處理而生成的圖像。


17.根據權利要求3所述的成像裝置，其中
所述深度學習過程構成識別處理的一部分。


18.根據權利要求17所述的成像裝置，其中
所述深度學習過程是卷積神經網絡深度學習過程。


19.根據權利要求6所述的成像裝置，其中
在完成了每幀中的基于所述成像單元的輸出的所述被攝圖像的獲取之后，所述信號處理器執行所述識別處理。


20.根據權利要求6所述的成像裝置，其中
在完成每幀中的基于所述成像單元的輸出的所述被攝圖像的獲取之前，所述信號處理器開始所述識別處理。


21.一種成像裝置，其包括：
成像單元，所述成像單元中二維地布置有多個像素，且所述成像單元拍攝圖像；
識別處理器，所述識別處理器執行針對從所述成像單元輸出的第一被攝圖像的識別處理的至少一部分；
輸出I/F，所述輸出I/F將所述識別處理器的識別結果或在所述識別處理期間獲得的中間數據，以及第二被攝圖像輸出至所述成像裝置的外部；和
輸出控制處理器，所述輸出控制處理器將要從所述輸出I/F輸出的所述識別結果或所述中間數據，以及所述第二被攝圖像中的至少一者從所述輸出I/F輸出至所述成像裝置的外部，
其中，所述...

【專利技術屬性】
技術研發人員：浴良仁，
申請(專利權)人：索尼半導體解決方案公司，
類型：發明
國別省市：日本;JP