索尼引導CMOS影像感測器整合AI的趨勢前進 - 工程師

索尼引導CMOS影像感測器整合AI的趨勢前進

https://bit.ly/3dTGMGx

根據Cole Market Research研究，2019年全球CMOS影像感測器市場價值達到153.9億美元
，即使在智慧型手機面臨出貨量下降的壓力，其他產業對於影像感測器需求依舊強大，使
得2020年該市場仍有機會呈現正成長，並預估到2025年市場價值可達255.7億美元，年複
合成長率達8.7%。

索尼5月中旬宣布，開發了一種有趣的新混合技術，即是在硬體中內建AI處理系統的影像
感測器。現今隨著影像和代碼的不斷融合，這種方法的好處和應用潛力巨大。

這個想法在概念上很簡單。就是任何手機或相機中必備的傳統CMOS影像感測器，堆疊在邏
輯晶片之上，且該邏輯晶片不僅可用於從影像處理，還可透過機器學習來萃取像素中的資
訊。因此，在影像被傳送至主機板、繪圖處理器或雲端之前，單一晶片(SoC)即可先期處
理照片，這完全符合邊緣運算的需求。

簡而言之，就是索尼的AI影像感測器能夠處理許多複雜的影片，進而輸出。例如，如果暴
露於野外的狗，透過晶片可以立即對其進行分析，而無需發送到雲端再來處理這一影像，
其可以分別辨識出“狗”、“草地”以及其他任何東西。

這種系統的好處在於，它可以在數據進入裝置的儲存或處理通道之前，將所有不必要或不
需要的數據丟棄。意味著裝置將會使用更少的處理器功能，且變得更加安全。例如：公共
場所的相機在隱私的保護下，可能可以將不相關的人或車牌以模糊方式處理。至於在智慧
家庭裝置上，可以辨識個人而無需保存或發送任何影像數據至雲端。甚至可以合併多次曝
光，以形成相機視野的熱量或頻率圖。

原本市場普遍認為，整合AI處理器的晶片會產生更高的功耗或產生延遲傳送，但是許多公
司的產品卻明確的指出，此類任務的整合晶片可以以非常快速地且極低成本方式進行。

即使要處理更複雜影像仍然需要功能更強大的晶片，但是經過適當設計，且針對不同情景
設計的晶片，絕對有能力產生大量有價值的數據，且有證明顯示可以避開攻擊或濫用影像
的機會。

目前來看，索尼的AI影像感測器仍然只是一個原型，廠商可以訂購進行測試，但不能進入
量產。不過，隨著索尼更積極佈局影像感測器，其他廠商勢必也將跟隨這一趨勢前進。

--