在目前的消費級別的電子產品上，其實我們已經能夠接觸到不少機器學習+相機的組合，比如説我們的智能手機，蘋果、谷歌以及華為等在旗下高端產品中都使用了機器學習來在有限的硬件基礎上拍出來更加理想的照片或者視頻。這項技術應用其實已經相當廣泛。索尼日前推出了一款集成機器學習芯片的圖像傳感器，型號為IMX500。

IMX500裸片（左）和封裝的IMX501（右）圖片來自 The Verge

索尼表示，IMX500圖像傳感器是世界上首款集成了AI運算單元的圖像傳感器，兼具處理能力以及內存功能，無需額外的硬件既可以執行機器學習驅動的視覺計算任務。並且，因為是傳感器上集成了相關硬件，索尼表示這樣的結果就是採用了這顆傳感器的產品將會帶來更快、價格更加合理以及更加安全的AI相機。

對於這一款集成AI功能的圖像傳感器產品，索尼表示不太可能會出現在智能手機或者平板等電子產品當中，主要是面向零售商以及工業客户，而這些領域正在開始廣泛地應用上計算機視覺技術，比如説亞馬遜的無人零售商店。

由於在圖像傳感器上直接集成了機器學習硬件，相機捕獲到的數據就無需上傳到服務器中進行計算分析，所有的計算都可以在本地完成，如果數據量還不是很大的話。索尼表示，IMX500在執行計算任務的時候會比其他AI相機快得多，能夠在3.1毫秒內將標準圖像識別算法（MobileNet V1）應用於單個視頻幀。不過，第一代的產品最大的瓶頸是IMX500處理更復雜的分析任務的能力。

除了硬件產品之外，索尼和微軟雙方宣佈，將在新的智能視覺傳感器中嵌入微軟的Azure人工智能技術。索尼還將在相關應用中使用微軟的Azure物聯網和感知服務技術。索尼表示，整合微軟的技術“將為企業場景提供更智能、更高級的攝像頭，還將在邊緣和雲之間更高效地分配資源，以便提升成本和能耗效率。”