嵌入式视觉系统精巧的体积、符合经济效益的价格以及高度弹性的整合特性让许多厂商纷纷投入研发设计的行列。 在许多方面,嵌入式视觉系统还只是刚开始被广泛的使用于商业中,但仍然不会改变这一技术将为未来产业带来巨大改变的潜力。嵌入式视觉系统高度的弹性也使得开发人员必须多方考虑,包括挑选适合的硬件界面、处理平台等等,以下the imaging source 映美精相机分享嵌入式机器视觉相关应用接口。
mipi-csi-2及fpd-link-iii相机接口
许多嵌入式机器视觉应用(尤其是多相机设置)需求的数据线长度超过mipi csi-2相机所能及的最大值(即20公分)。 藉由fpd-link桥接器即可实现其数据线长达15米。图像数据经由精巧(ø 2.8 mm)的同轴电缆以高达4.16 gbps速度传输,同时传输影像数据、控制指令及供电。
如此一来,其带宽充裕,可以从5mp相机中,以每秒30张的帧速率传输图像数据。 开发人员可以在mipi-csi-2和fpd-link-iii板机亦或具备防护ip67等级外壳的fpd-link-iii相机之间进行选择。 此精巧相机提供黑白与彩色不同机种选择,装载sony和onsemi最新cmos传感器技术(全局和卷帘快门,分辨率范围自0.3mp[vga]至8.3 mp)。
无论应用需求为mipi csi-2亦或fpd link接口、高分辨率或高帧速率,the imaging source皆能提供丰富广泛的嵌入式视觉相机模块以符合各类的需求。
为何选择mipi csi2或fpd-link iii相机接口?
有些使用者可能想知道为何选择mipi csi-2或fpd-link-iii相机,而非usb-3或gige相机。 其原因在于嵌入式平台本身的硬件功能特性,即硬件加速的图像信号处理器(isp)。 嵌入式平台的mipi-csi-2接口可直接链接isp,以避免延迟及数据转换问题。 the imaging source mipi-csi-2相机经过专门设计,可将原始图像数据直接传输至接口。 这类的嵌入式板载相机仅包括最必要的基本功能,因此特别具有成本经济效益。 isp能够处理硬件加速的操作,如去马赛克、色彩校正、色彩空间转换、白平衡、镜头校正和图像数据压缩(如h.264/h.256)。
两台相机开发工具包,搭配nvidia jetson nano (mipi csi-2接口)并增配自动冷却功能防止过热降频。
平台为嵌入式视觉带来ai优势
除isp外,上述nvidia嵌入式计算机(例如nvidia jetson nano, xavier nx *及agx xavier *)提供了具有cuda内核的gpu和多个mipi-csi-2相机接口,而造就它们完美地适用于ai和要求严苛的机器视觉应用。 nvidia平台能够并行运作多个神经网络,以执行图像分割、图像分类和对象识别。 nvidia sdk "jetpack" 支持所有基于nvidia jetson的嵌入式平台。
载板附带6个使用jetson agx xavier的fpd link iii相机模块。
nvidia提供广泛的软件库,可进行深度学习以及图像和视讯处理。 the imaging source提供相应的相机驱动程序能够完美地集成至nvidia软件框架中。而图像数据能够直接地传输至预训练的深度学习模块。
对于要求不高的图像处理任务,具备mipi-csi-2相机接口与isp的raspberry pi 4会是一个极佳的选择。 相同地,mipi-csi-2接口也能够直接地链接至isp。例如,raspberry pi 4能够压缩高分辨率h.264图像并经由以太网或wlan发送。
edge机器视觉
经济高效的运作能力、升级的机器学习运算以及整体上减少系统占用空间,使边缘计算和ai(尤其是深度学习)的发展得以融合。 深度学习为检验标准不易量化或定义的应用提供了机器视觉解决方案,为检验、装配和质量保证应用提供新的可能性。
图: 低成本的处理性能、深度学习技术的进步和高性能传感器,使得基于边缘的视觉应用得到越来越多采用。
nvidia优异的ai功能与the imaging source丰富且坚固可靠的工业相机产品结合,使嵌入式视觉开发人员能够实现了以往无法或需要大量编程工作的应用程序。
以上是网络信息转载,信息真实性自行斟酌。










