图像传感器推动嵌入式视觉技术发展，应用于“智能相机”等工业领域-光虎光电科技（天津）有限公司

中文 EN

关于我们

图像传感器推动嵌入式视觉技术发展，应用于“智能相机”等工业领域

作者：
来源：光虎光电科技（天津）有限公司
访问量：3165
发布时间：2019-04-26 03:11:13

新的成像应用正在蓬勃发展，从工业4.0中的协作机器人，到无人机消防或用于农业，再到生物特征面部识别，再到家庭中的护理点手持医疗设备。出现这些新应用程序的一个关键因素是，嵌入式视觉比以往任何时候都更普及。嵌入式视觉不是一个新概念；它只是定义了一个系统，其中包括一个视觉设置，在没有外部计算机的情况下控制和处理数据，现已广泛应用于“智能相机”等工业质量控制。

近年源于消费类市场经济适用硬件器件的开发，相较于以往使用电脑的方案，这些器件大幅度减小了材料清单(BOM)成本和产品体积。举个例子，小型系统集成商或OEM现在能够小批量采购诸如NVIDIA Jetson的单板机或模块系统；而较大型的OEM则可以直接获得如高通骁龙(Qualcomm Snapdragon)或英特尔(Intel) Movidius Myriad 2 等图像信号处理器。在软件级方面，市面软件库能够加快专用视觉系统的开发速度，减小配置难度，即便是针对小批量生产。

第二个推动嵌入式视觉系统发展的变化是机器学习的出现，它使实验室中的神经网络能够接受培训，然后直接上传到处理器中，以便它能够自动识别特征，并实时做出决定。

能够提供适用于嵌入式视觉系统的解决方案，对于面向这些高增长应用的成像企业来说至关重要。图像传感器由于能够直接影响嵌入式视觉系统的效能和设计，因而在大规模引进中有重要角色，而它的主要推动因素可概括为：更小尺寸、重量、功耗和成本，英语简称为“SWaP-C”(decreasing Size, Weight, Power and Cost)。

1. 降低成本至关重要

嵌入式视觉新应用的加速推动器是满足市场需求的价格，而视觉系统成本正是实现这要求的一个主要制肘。

1.1. 节省光学成本

减小视觉模块成本的第一个途径是缩小产品尺寸，原因有两个：首先是图像传感器的像素尺寸愈小，晶圆便可以制造更多的芯片；另一方面传感器可以使用更小更低成本的光学组件，二者都能够降低固有成本。

对于图像传感器制造商来说，这种降低的光学成本对设计有另一个影响，因为一般来说，光学成本越低，传感器的入射角越不理想。因此，低成本光学需要在像素上方设计特定的位移微透镜，以补偿来自广角的畸变和聚焦光。

1.2. 传感器低成本接口

除了光学优化，传感器接口的选择也间接影响视觉系统的成本。MIPI CSI-2接口是实现节约成本的最合适选择（它最初是由MIPI联盟为移动行业开发的）。它已被大多数ISP广泛采用，并已开始在工业市场采用，因为它提供了一个从NXP、Nvidia、高通公司或Intel等公司的低成本的片上系统（SOC）或模块上系统（SOM）的集成。设计一种具有MIPI CSI-2传感器接口的CMOS图像传感器，无需任何中间转换器桥，直接将图像传感器的数据传输到嵌入式系统的主机SOC或SOM，从而节省了成本和PCB空间，当然，在基于多传感器的嵌入式系统（如360度全景系统）中，这一优势更为突出。

不过这些好处受到一些限制，因为MIPI接口的连接距离限制为20 cm，这在传感器距离主机处理器较远的远程设置中可能不是最佳的。在这些配置中，以牺牲小型化为代价，使用集成更长接口的相机板解决方案是比较好的选择。一些现成的解决方案可以集成，例如工业相机制造商（如Flir、AVT、Basler等）的相机板通常可在MIPI或USB3接口中使用，后者能够达到的范围可以超过3米至5米。

1.3. 减小开发成本

在投资新产品时，不断上升的开发成本往往是一个挑战；它可能会在一次性开发费上花费数百万美元，并给上市时间带来压力。对于嵌入式视觉，这种压力变得更大，因为模块化（即产品能否切换使用多种图像传感器）是集成商的重要考虑。幸运的是，通过在传感器之间提供一定程度的交叉兼容性，例如，通过定义共享相同像素体系结构的组件系列以具有稳定的光电性能，通过具有共用光学中心来共享单个前端机制，以及通过兼容的PCB组件来简化评估，集成和供应链，从而减小开发费用。

为简化相机板设计（即使用于多款传感器），有两种方法设计传感器封装。针脚对针脚兼容是相机板设计人员的首选设计，因为它能使多种传感器共享同一电路和控制，使得组装完全不受PCB设计影响。另一个选择是采用尺寸兼容的传感器，这样同一PCB可以使用多款传感器，但是这也意味着他们可能要应付每一款传感器的接口和布线的差异状况。

2. 能效提供更佳单独工作能力

微型电池驱动的设备是最明显的受益于嵌入式视觉的应用程序，因为外部计算机阻止任何便携式应用程序的发生。为了降低系统的能耗，图像传感器现在包含了多种功能，使系统设计者能够节省电力。

从传感器角度出发，有多种方法减小嵌入式视觉系统功耗而不损采集帧率。最简单的方法是通过尽可能长时间使用待机或闲置模式，在系统级最小化传感器本身的动态操作。待机模式通过关闭仿真电路，把传感器的功耗降低到工作模式的10%以下。而闲置模式则可把功耗减半，并让传感器在数微秒内重新启动获取图像。

而在传感器设计集成节能的另一个方法是采用先进光刻节点技术。技术节点越小，转换晶体管所需的电压便越小，由于功耗与电压成正比(𝑃𝑑𝑦𝑛𝑎𝑚𝑖𝑐∝𝐶×𝑉²)，这样就能降低功耗。所以10年前使用180nm技术生产的像素不单把晶体管缩小到110nm，同时也把数字电路的电压从1.9伏降到1.2伏。下一世代的传感器将使用65nm技术节点，使得嵌入式视觉应用更省能。

3. 片上功能为应用程序设计的视觉系统铺平了道路

嵌入式视觉的一些偏锋延展概念，引导我们对图像传感器进行全面定制，以3D堆叠方式集成所有处理功能（芯片上的系统）以实现优化性能和功耗。不过，开发这一类产品的成本十分高昂，能够达到这一集成水平的全定制传感器长远来说并非完全不可能，而现在我们正处于一个过渡阶段，包含将某些功能直接嵌入到传感器，以减省计算负载和加快处理时间。

4. 减小重量尺寸以配合最小应用空间

嵌入式视觉系统的另一主要要求是能够配合狭小空间，或是重量要小，以便用于手持式设备/或延长电池推动产品的工作时间。这就是现在大部份嵌入式视觉系统使用只有1MP到5MP的低分辨率小型光学格式传感器的原因。

减小像素芯片的尺寸只是减小图像传感器占位面积和重量的第一步。现在的65nm工艺让我们能够把全局快门像素尺寸减小至2.5μm而不损光电性能。这种生产工艺使得诸如全高清全局快门CMOS图像传感器能够配合手机市场要求小于1/3英寸的规格。

减小传感器重量和占位面积的另一主要技术是缩小封装尺寸。芯片级封装在过去数年在市场迅速成长，在移动、车载电子和医疗应用中特别明显。

三维堆栈是让半导体器件生产的创新技术，它的原理是在不同晶圆上制造各种电路芯片，然后利用铜对铜连接和过硅冲孔(Through Silicon Vias，简称TSV)技术进行堆栈和互联。三维堆栈因为是多层重迭芯片，允许器件实现比传统传感器更小的占位尺寸。而在三维堆栈传感器中，读出和处理芯片可以置于像素芯片和行译码器的下方。这样，传感器的占位尺寸因缩小的读出和处理芯片而减小，并且可以在传感器中加入更多处理资源以减小图像信号处理器的载荷。

总结而言，嵌入式视觉系统可以归纳为一种「轻量」视觉技术，可以用于包括OEM、系统集成商和智能相机厂商等不同类型企业。“嵌入式 “是一个可用于不同应用的概括性描述，因而不能开出列表说明它的特征。不过优化嵌入式视觉系统有几个适用法则，就是一般而言，市场推动力并非来自超级快的速度或超高的灵敏度，而是尺寸、重量、功耗和成本。图像传感器是这些条件的主要推手，所以需要小心选择合适的图像传感器，以便于优化嵌入式视觉系统的总体性能。合适的图像传感器能为嵌入式设计人员带来更多灵活性，节省材料清单成本，减小照明和光学组件的占位面积。它也让设计人员在无需面对更多复杂性的情况下，选择来自消费市场的大量经济适用并具有优化深度学习功能的图像信号处理器。

来源：网络

上一篇：2019年全球机器视觉市场规模近100亿美元，中国机器视觉发展活跃 下一篇：给设备安装“智眼”，机器视觉为工业4.0构建四大核心能力