索尼引导CMOS影像传感器整合AI的趋势前进
https://bit.ly/3dTGMGx
根据Cole Market Research研究，2019年全球CMOS影像传感器市场价值达到153.9亿美元
，即使在智慧型手机面临出货量下降的压力，其他产业对于影像传感器需求依旧强大，使
得2020年该市场仍有机会呈现正成长，并预估到2025年市场价值可达255.7亿美元，年复
合成长率达8.7%。
索尼5月中旬宣布，开发了一种有趣的新混合技术，即是在硬件中内建AI处理系统的影像
传感器。现今随着影像和代码的不断融合，这种方法的好处和应用潜力巨大。
这个想法在概念上很简单。就是任何手机或相机中必备的传统CMOS影像传感器，堆叠在逻
辑芯片之上，且该逻辑芯片不仅可用于从影像处理，还可透过机器学习来萃取像素中的资
讯。因此，在影像被传送至主机板、绘图处理器或云端之前，单一芯片(SoC)即可先期处
理照片，这完全符合边缘运算的需求。
简而言之，就是索尼的AI影像传感器能够处理许多复杂的影片，进而输出。例如，如果暴
露于野外的狗，透过芯片可以立即对其进行分析，而无需发送到云端再来处理这一影像，
其可以分别辨识出“狗”、“草地”以及其他任何东西。
这种系统的好处在于，它可以在数据进入装置的储存或处理通道之前，将所有不必要或不
需要的数据丢弃。意味着装置将会使用更少的处理器功能，且变得更加安全。例如：公共
场所的相机在隐私的保护下，可能可以将不相关的人或车牌以模糊方式处理。至于在智慧
家庭装置上，可以辨识个人而无需保存或发送任何影像数据至云端。甚至可以合并多次曝
光，以形成相机视野的热量或频率图。
原本市场普遍认为，整合AI处理器的芯片会产生更高的功耗或产生延迟传送，但是许多公
司的产品却明确的指出，此类任务的整合芯片可以以非常快速地且极低成本方式进行。
即使要处理更复杂影像仍然需要功能更强大的芯片，但是经过适当设计，且针对不同情景
设计的芯片，绝对有能力产生大量有价值的数据，且有证明显示可以避开攻击或滥用影像
的机会。
目前来看，索尼的AI影像传感器仍然只是一个原型，厂商可以订购进行测试，但不能进入
量产。不过，随着索尼更积极布局影像传感器，其他厂商势必也将跟随这一趋势前进。