You are on page 1of 44

Dec 2020/ Jan 2021 ISSN 2412-6934

FPGA在嵌入式视觉
系统设计中的应用 9

嵌入式机器视觉相机
的接口选择 16

线阵分时成像系统的
特点及应用 26

远心镜头紧跟图像传
感器的发展步伐 32

3D 扫描仪测量
和检查航空航天
涡轮叶片 18

www.vision-systems-china.com
微信公众号
业界领先的数字图像采集卡

Xtium2系列
用于PCle Gen3平台的图像采集和
处理卡
Teledyne DALSA的Xtium™2系列:Teledyne DALSA的图像采集卡专为工业
和生物医学成像应用而设计,在Microsoft®和Linux平台上的性能和可靠性达
业界领先水平。
Xtium2系列以PCIe Gen3×8平台为特色,支持CoaXPress®2.×(CXP12)
和AIA的Camera Link HS®(CLHS)。Xtium系列以PCIe Gen2 ×4/×8平台
为特色,支持AIA的 CameraLink®、CLHS和CXP接口。

Xtium2-CLHS PX8 Xtium2-CLHS PX8 HR Xtium2-CLHS PX8 LC Xtium2-CLHS FX8


优质性能 高分辨率 性价比高 本地光纤连接器

Xtium2-CLHS FX8 LC Xtium2-CXP12


性价比高的光纤 CoaXPress 一扫关注

更多信息请访问我们的网站:
teledynedalsa.com/xtium2
Dec 2020/ Jan 2021
目录 CONTENTS

封面故事
3D测量
市场风向标 3D扫描仪测量和检查航空航天涡轮叶片
7 全球服务机器人市场实现32%的高增长 机器人、蓝光3D扫描仪和软件,帮助加速航空航
2019年,全球物流机器人销售额增长110%,医疗机器 天涡轮叶片的上市时间。
人销售额增长28%。
18

技术趋势 26 光源与照明
线阵分时成像系统的特点及应用
9 嵌入式视觉
Centralized computing
infrastructure
Data transmission
to cloud
Control and
actuation
线阵分时成像技术可以解决外观缺陷难以检测的问
FPGA在嵌入式视觉系统设计中的应用 题,并能节省设备工位、降低算法难度,大幅提升检
Data transmission to Control and
FPGA集低功耗、先进计算和安全性于一体,适用于从 测效率,简化检测任务。
co-located processing units actuation

Distributed computing
infrastructure
人工智能到无人机的多种包含视觉功能的应用。
30 箱柜拣选
优化的机器人路径规划和多件拣选功能,
12 高光谱成像 实现每分钟60个部件的箱柜拣选速度
高光谱成像的传感器和相机要求 自动校准、一键式设置和扫描示教功能,确保快速
通过适当的组件选择,高光谱成像技术可以在可见光 部署。
波长之外,提供有效的图像捕获。

产品聚焦
16 相机接口 32 远心镜头
嵌入式机器视觉相机的接口选择 远心镜头紧跟图像传感器的发展步伐
MIPI CSI-2或FPD-Link III相机接口,能直接与图像信号 随着传感器变得越来越大,分辨率越来越高,选择合
处理器连接,为嵌入式视觉应用提供更大的灵活性。 适的镜头对机器视觉系统的成功至关重要。

访谈
应用与解决方案
35 聚焦技术革新、客户需求与前瞻性布局,
21 深度学习
驶入CMOS图像传感器发展的高速通道
深度学习系统助力交通执法
—— 访思特威首席运营官马伟剑先生
精准调整的卷积神经网络(C N N)和稳健的结果监
控,帮助交通执法部门实现精准执法。

4 编者话
23 光源与照明
面向食品和饮料检测的机器视觉照明优化方案
5 前沿简讯
定制的特定波长的LED光源,能揭示出隐藏的或难以 37 产品撷英
检测的信息。
40 广告索引

关于《视觉系统设计》
《Vision Systems Design》杂志是美国领先的媒体品牌,主要致力于报道机器视觉及影像处理系统领域的内容。其深度的技术杂志、投稿邮件投递的电子快报以及网站内容,每月为全球143个国家的超过
94,000名工程师和设计专家提供最新报道,是同类媒体中的佼佼者。《Vision System Design》杂志是机器视觉与自动化解决方案领域非常受欢迎的一本杂志。
ACT传媒集团, 国内领先技术期刊出版商之一,获得独家授权出版Vision Systems Design中文版杂志,以函盖正在迅速发展的中国市场。在2015年将从3月开始。《视觉系统设计》杂志是以简体中文发行双
月刊;通过邮寄免费发行到全国9,000多名专业读者;及通过电邮传送到约15000相关读者的电子邮箱内(VSDC内部统计)。此外《视觉系统设计》亦参加国内外相关展会, 面向专业读者免费派发,增加
发行覆盖。
《视觉系统设计》在内容方面将以《Vision System Design》为蓝本,同时增加中国机器视觉领域的相关报道,为读者提供机器视觉及影像处理系统领域的技术、设计、应用和市场等诸多方面的最新发展
状况,欢迎该领域内的广大厂商积极参与,踊跃投稿及宣传。《视觉系统设计》的权威性内容是视觉及相关应用领域用户所关注。
扫一扫 请查询本刊专业网站:www.vision-systems-china.com。
免费下载电子书
About Vision Systems Design China
Vision System Design (VSD) is the leading integrated media brand focused on machine vision and image processing systems. Its in-depth magazine, convenient email newsletters and content-rich website are seen by more than 94,000 engineering
and design professionals in 143 countries each month—more than any other vision-focused media provider delivers. It is a very popular media brand in the machine vision and automation solutions markets.
ACT International Media Group, one of the largest high-tech publishers in China, is authorized to publish the Chinese version to serve the technical professionals in the rapidly growing market in the region. VisionSystems Design China (VSDC) is
published bi-monthly in Simplified Chinese, distributing control-free to 9,000 readers in printed copies and 15,000 readers through electronic versions (publisher' s own data). In addition, VSD China willparticipate in major trade shows across China,
offering bonus distributions to the industry.
Content of VSD China will be partially selected from VSD by our local editors;supplement by locally generated editorial comprises of industry submissions, news/newproducts as well as executive interviews. VSD China' s authoritative content
attracts buyers focused on vision for many different applications and industries.Please visit our relevant website, www.vision-systems-china.com.

2 Dec 2020/ Jan 2021 视觉系统设计 Vision Systems Design China


Dec 2020/ Jan 2021
目录 CONTENTS

COVER STORY
Telecentric Lens
MARKET TRENDS Telecentric lens companies keep pace with
7 Service robots record: Sales Worldwide Up 32% image sensor evolution
In 2019, Logistics Robots up 110%, Medical Robots up 28%. As sensors become larger and higher resolution,
choosing the right lens becomes paramount to
18 machine vision system success.

TECHNOLOGY TRENDS 26 Lighting & Illumination


The characteristics and applications of linear
9 Embedded Vision
Centralized computing
infrastructure
Data transmission
to cloud
Control and
actuation
time-sharing imaging system
How FPGAs are used in embedded vision
Linear time-sharing imaging technologies can solve
applications
Data transmission to
co-located processing units
Control and
actuation
the problems that appearance defects are difficult
Distributed computing
Offering a combination of low power, advanced
infrastructure
to detect, save floor space, reduce algorithm
computation, and security, FPGAs suit applications
difficulty, greatly improve detection efficiency, and
ranging from artificial intelligence to drones.
simplify detection tasks.

12 Hyperspectral Imaging 30 Bin Picking


Sensor and camera requirements for hyperspectral Bin picking up to 60 parts per minute:
imaging Maximum speed thanks to optimum robot
IWith proper component selection, hyperspectral path planning and multi-pick function
imaging technology provides effective image capture Automatic calibration, one-click setup and scan-
beyond the visible wavelength. based teach-in ensure fast deployment.

16 Camera Interface PRODUCT FOCUS


Interface selection for embedded machine vision
32 Telecentric Lens
cameras
Telecentric lens companies keep pace with image
The MIPI CSI 2 or FPD-Link III camera interface can
be directly connected to the image signal processor,
sensor evolution
providing greater flexibility for embedded visual As sensors become larger and higher resolution,
applications. choosing the right lens becomes paramount to
machine vision system success.

APPLICATIONS & SOLUTIONS INTERVIEW


21 Deep Learning 35 Focusing on technological innovation,
Deep learning system powers traffic enforcement customer needs and forward-looking layout,
system Drives into the high-speed channel of CMOS
Finely tuned convolutional neural networks and robust image sensor development
result monitoring provide accurate performance. ——Interview with William Ma, COO of
SmartSens Technology

23 Lighting & Illumination 4 EDITOR'S NOTES


Optimizing machine vision lighting for food and 5 LEADING EDGE SNAPSHOTS
beverage inspection
LEDs tailored at specific wavelengths reveal otherwise
37 PRODUCTS HIGHLIGHTS
hidden or difficult to detect information. 40 AD INDEX

关于雅时国际商讯 (ACT International)


雅时国际商讯(ACT International)成立于1998年,为高速增长的中国市场中广大高技术行业服务。ACT通过它的一系列产品-包括杂志和网上出版物、培训、会议和活动-为跨国公司及中国企业架设
了拓展中国市场的桥梁。 ACT的产品包括多种技术杂志和相关的网站,以及各种技术会议,服务于机器视觉设计、电子制造、激光/ 光电子、射频/ 微波、化合物半导体、洁净及污染控制、电磁兼容等
领域的约十多万专业读者。ACT 亦是若干世界领先技术出版社及展会的销售代表。ACT总部在香港,在北京、上海、深圳和武汉设有联络处。www.actintl.com.hk

About ACT International Media Group


ACT International, established 1998, serves a wide range of high technology sectors in the high-growth China market. Through its range of products -- including magazines and online publishing, training, conferences and events --
ACT delivers proven access to the China market for international marketing companies and local enterprises. ACT's portfolio includes multiple technical magazine titles and related websites plus a range of conferences serving more
than 100,000 professional readers in fields of electronic manufacturing, vision system design, laser/photonics, RF/microwave, cleanroom and contamination control, compound semiconductor, and Electromagnetic Compatibility. ACT
International is also the sales representative for a number of world leading technical publishers and event organizers. ACT is headquartered in Hong Kong and operates liaison offices in Beijing, Shanghai,Shenzhen and Wuhan.
www.actintl.com.hk

视觉系统设计 Vision Systems Design China Dec 2020/ Jan 2021 3


编者话
Editor’s
Notes 中国总部 China Headoffice

乐观迎接 2021 出版社


地址
Publishing House
Address
雅时国际商讯 ACT International

在机器视觉、AI 技术、运动控制等不断发展的各类技术的加持下,机器 香港九龙 Unit B, 13/F, Por Yen Building,


长沙湾青山道478号 No.478 Castle Peak Road,
人市场迎来了快速发展。在发展智能制造的大环境下,提升生产精准度和效率、 百欣大厦 Cheung Sha Wan,
13楼B室 Kowloon, Hong Kong.
节约劳动力成本,促使工业生产中大批量机器换人。2020 年新冠疫情的出现,
电话 852 2838 6298
也在一定程度上加速了工厂中机器人的部署。 传真 852 2838 2766

除了工业机器人市场外,像物流机器人、医疗机器人等服务机器人市场 出版总监 Publishing Director


麦协林 Adonis Mak
同样增长快速。国际机器人联合(IFR)会近期公布的《2020 全球机器人年度
电邮 adonism@actintl.com.hk
报告》显示,2019 年全球专业服务机器人市场的销售额同比增长了 32%,达 社长及副总裁 Publisher & VP of Sales Marketing
麦协和 Mark Mak
到 112 亿美元 ;从销售额来看,医疗机器人大约占据了服务机器人市场的半 电邮 markm@actintl.com.hk

壁江山(47%),到 2022 年有望翻番 ;从增长速度方面看,物流机器人市场增 中国区总经理 General Manager - China


徐旭升 Michael Tsui
速最快,2019 年同比飙升 110%(p7)。IFR 主席 Milton Guerry 还对未来的市 电邮 michaelt@actintl.com.hk
中文版主编 Editor - China
场发展给出了乐观预期 :
“我们预计,专业机器人和个人服务机器人市场都将
庞会荣 Rossie Pang
继续强劲增长。” 电邮 rossiep@actintl.com.hk
编辑顾问 Editorial Consultant
机器人与 3D 视觉的结合,在各种检测和测量应用中广泛应用。在本期的 王振宇 Mike Wang

封面故事中(p18),一家航空航天公司,利用自动化蓝光 3D 扫描系统测量和 记者 Reporter


陈玉婷 Julie Chen
检查涡轮叶片。该 3D 扫描仪基于条纹投影技术和蓝光 LED 光源,能有效滤 电邮 juliec@actintl.com.hk
Lily Hu
除环境光干扰,从而能捕获清晰的数据,从而实现高度精确测量。 胡婴
电邮 lilyh@actintl.com.hk
通过搭载 3D 视觉功能的机器人,实现零件的随机箱柜拣选,是当下智能
北京 Beijing
工厂部署中最热门的环节之一。如何让机器人能够更准、更快、更安全地抓取 Tel 86 10 8484 4007

到想要的产品,并且方案能够快速部署,也是当下工厂机器换人过程中最为关 上海 Shanghai
Tel 86 21 6251 1200
心的话题之一。ISRA VISION 公司专为机器人应用开发的 PowerPICK 3D 智能 深圳 Shenzhen
Tel 86 755 2598 8573/8567
传感器,采用四摄像头技术,能从多个角度扫描箱柜中的物品 ;加之优化的机
武汉 Wuhan
实现了每分钟 60 个零件的箱柜拣选速度(p30)
器人路径规划和多件拣选功能, 。 Tel 86 27 5923 3884/1564

随着万物互联、实时监控等要求高分辨率、高带宽的应用需求不断增长, 免费赠阅咨询
通过边缘计算的方式处理视频数据,正在受到广泛关注。FPGA 凭借处理速度 电话 86 755 2598 8573/8567
传真 86 755 2598 8567
快、可重构性强、功耗低、成本低等优势,为诸如自动驾驶、无人机、监控 电邮 circulation@actintl.com.hk
网址 www.vision-systems-china.com
等低功耗嵌入式视觉应用的边缘计算提供了一个可选平台(p9)。
缺陷检测是视觉视觉中最常见、也是最具挑战性的应用。针对一个产品
美国办公室 US office
上不同类型的缺陷检测,沃德普通过在一个工位上部署“多个光源 + 一台相机”
的方式,开发出了在一个工位上检测单个工件上的多种缺陷的线阵分时频闪
Alan Bergstein Group Publisher
成像检测解决方案,比如可以在一个工位检测手机屏幕表面上的凹凸点、脏污、 (603) 891-9447 alanb@endeavorb2b.com

划伤等(p26)。 John Lewis Editor in Chief


(603) 891-9130 jlewis@endeavorb2b.com
在本期内容中还包括了高光谱成像及应用(p12)、面向嵌入式视觉应用 James Carroll Jr. Editor

的 MIPI CSI-2 或 FPD-Link III 相机接口(p14)、用于食品和饮料检测的照明 (603) 891 9320 jcarroll@endeavorb2b.com

方案(p23)、远心镜头的发展以及对思特威高管的访谈等内容,供读者参考。
尽管 2020 开年并不算顺利,但好在市场很快恢复并发展,这也为我们乐 2020 版权所有 翻印必究

观地迎接新的一年增强了信心!
本刊编辑部

4 Dec 2020/ Jan 2021 视觉系统设计 Vision Systems Design China


前沿简讯
Leading Edge Snapshots

前沿简讯 Leading Edge Snapshots

Gocator 3D 线激光轮廓传感器优化铝型材脱皮方案
Alunorf 是德国一家大型铝轧制 Alunorf 选择了较大扫描视野的 LMI
和再熔化工厂,该工厂需要改进原铝 Technologies 公 司 的 Gocator 2100 系
型 材(8.6m×2.2m×0.6m) 的 几 何 列传感器,最大程度减少了所需传感
形状和形貌测量。每个铝型材的轧制 器的数量,性价比提高。系统中不含
表面均有不同程度的多余材料需要脱 需移动的传感器部件,避免磨损导致
皮,以便在铸造过程中去除冶金外壳。 的机械维护。这也是第一套能够在线
工厂现有的移动点激光扫描仪系 测量双侧铝型材的系统。
统无法覆盖整个铝型材的长和宽,只覆 Gocator 2100 为 AIT 系统带来了
盖了沿铝型材表面某些位置的交叉轮 以下主要优势 :多传感器组网功能可
廓。此方法无法测量这些位置之间铝型 对每个铝型材执行 360°扫描 ;可轻 器内置的测量工具(如振动校正)及
材的表面特性,还必须增加脱皮深度 松将网络中所有传感器校准到世界 传感器外的数据分析 ;确保对不同铸
进行补偿。这导致每个脱皮铝型材上还 坐 标, 并 返 回 高 精 度 测 量 结 果 ;可 造厂和模具之间的铝型材形状进行
多了一些不必要的废料。此外,使用带 轻松实现系统集成,将一个或多个 100%在线质量检测 ;即使扫描光照
移动传感器头的测量系统会产生机械磨 Gocator 传感器无缝连接至 Alunorf 专 不好的区域或者目标物,也可以获得
损,导致停机维护甚至生产中断。 属接口(ibaPDA 系统);通过 GDK/ 高质量的 3D 数据 ;内置的机器人校
在 新 开 发 的 AIT 系 统 中, SDK,轻松开发定制的算法用于传感 准功能,使系统集成更加容易。

OPT 三维空间曲线引导方案助力智能制造
随着在测量精度、速度和灵活性 OPT 针对此需求推出了 3D 相机 轴坐标定位精度为 0.03mm,z 轴坐标
方面的要求不断提高,以及被测物条 三维空间曲线引导解决方案。3D 相 定位精度为 0.024mm,理论扫描速度
件越来越复杂,机器视觉正在从 2D 机在运动时扫描获取三维空间中任意 最高可达 240mm/s。
技术向 3D 技术转变,特别是近几年, 曲线 xyz 三轴方向的 3D 点云数据图, 相比于 2D 方案,该 3D 相机三
市场对 3D 空间曲线引导的需求越来 并通过自主研发的 SciSmart 软件对曲 维空间曲线引导应用解决方案具有如
越多。 线的 3D 点云数据图进行图像数据处 下突出优势 :在线检测快速移动的目
理,得到三维曲线 xyz 三轴坐标点集。 标物,获取形状和对比度 ;消除 2D
再通过 SciSmart 软件标定后,将三轴 检测无法获取高度的缺陷 ;实现部件
坐标点集传到运控平台的运动轴上做 和装配的 100%在线质量控制 ;最大
动作引导。此时运动轴执行相应的动 限度地缩短检测周期 ;最大限度地提
作,即可实现空间任意位置的点胶、 高生产质量和生产量 ;对比度不变,
跟随、切割等功能。 是检查低对比度物体的理想选择 ;对
方案中使用的 LPB140 相机,xy 较小的照明变化或环境光不敏感。

视觉系统设计 Vision Systems Design China Dec 2020/ Jan 2021 5


前沿简讯
Leading Edge Snapshots

OX200 智能轮廓传感器实现焊缝在线实时监测
在自动化焊接过程中,往往需 取的 SDK,OXP200 还可根据具体
要实时在线检测焊接质量,及早发 应用要求进行相应调节,并集成一
现焊接缺陷,从而把焊接缺陷限制 系列测量功能,即使操作人员不具
在一定的范围内,以确保设备和人 备丰富的图像处理专业知识,也能
身安全。 进行高效的在线或离线检测。
在焊接系统中,首先需要智能 具体到在自动焊接过程中的应
传感器扫描区域内各轮廓点的点源 用,OXP200 在其扫描范围内最多
位置信息,然后通过软件算法完成 给到 600 个轮廓点(x,z)的点源数
对常见焊缝的在线实时检测。而设备 对焊接的严苛环境,如何与焊接机 据,控制器则可以根据这些点源数据
通过计算检测到焊缝与焊枪之间的偏 器人简单快速集成,以及如何保证 的信息,准确找到焊缝所在处的 x 轴
差,输出偏差数据 ;控制系统则根据 快 速 强 大 的 实 时 检 测 与 分 析 能 力, 坐标以及 z 轴方向的高度信息,同时
检测结果调整焊枪位置,精确引导焊 这些都需要通盘考虑。堡盟 OX200 还可以得到焊缝的宽度值信息。这样,
枪自动焊接,从而实现对焊接过程中 智能型轮廓传感器,为焊缝监测提 焊接的位置、焊接的程度都可以尽在
焊缝的智能实时跟踪,优化提升焊接 供了理想选择。 掌控之中。OXP200 可以安装在机器
质量。 OX200 采 用 优 化 的 设 计, 可 集 人手臂上,无需外部光源,一根电缆
对于 智 能 传 感 器而言,如何应 成至图像处理系统中。凭借可免费获 就能实现以太网供电。

图麟科技盖板玻璃检测方案实现 99.5% 产品出厂良率


依 托 视 觉 算 法、 光 学 系 统、 精 为 6s/PCS,较传统方式提升 30 多倍。 分布式 Agent 点上,将整检测尺寸延
准控制系统等多项原创技术,图麟科 使用异构组合光,通过不同角度、不 伸到任意尺寸,实现了应用场景的可
技开发的中尺寸盖板玻璃检测设备 同波长、不同亮度来构建丰富的表面 伸缩性。并且,通过快速部署的几十
T2200,支持 7-18 寸盖板玻璃检测, 缺陷信息,实现对各类细小缺陷的精 台甚至几百台相机的协同合作,能以
如汽车中控盖板玻璃、Pad 盖板玻璃、 准捕捉,检出率达到 97% 以上,最 智能化、模块化的方式管理所有节点。
笔记本盖板玻璃等。 小检测精度达 0.02mm。其搭载的数 同时,在产线上不断优化升级,使得
T2200 通 过 板 载 FPGA 图 像 处 据系统能够按照产品类型、客户类型、 T2200 设备可应对产品多变、缺陷情
理芯片优化并行计算,检测节拍最快 生产机台、不良种类与区域、操作人 况复杂、检测标准多变、数据量大、
员等信息,实时生成良率统计报 稳定性要求高等问题。
表,可及时对产线制程进行调整, 从某盖板厂商实际产线运行情
以 改 进 生 产 良 率。 目 前,T2200 况来看,T2200 设备的控制精度和稳
检测的产品出厂良率可达 99.5%。 定 性 较 高, 故 障 率 低, 基 本 可 保 证
为 应 对 复 杂 的 检 测 场 景, 24×7 全天候稳定运行。而且设备除
T2200 设 备 采 用 了 Tunicorn 了能实现对各类缺陷的一站式智能全
Agents 分布式处理系统。该系统 检外,还能精确识别出灰尘等干扰,
能以一种搭积木的方式快速建立, 进一步减少了因误检、漏检等问题带
并能将采集、计算分摊到不同的 来的损失,为厂商降本增效。

6 Dec 2020/ Jan 2021 视觉系统设计 Vision Systems Design China


Market Trends 市场风向标

全球服务机器人市场实现 32% 的高增长


物流机器人增长110%,医疗机器人增长28%。

文/VSDC

来 自 国 际 机 器 人 联 合 会(International Federation of
Robotics,IFR)近日发布的《2020 全球机器人年度报告》
显示,2018-2019 年间,全球范围内专业服务机器人的销
售额增长了 32%,达到 112 亿美元 ;其中,全球物流机器
人市场飙升 110%,医疗机器人市场增长 28%。
新冠疫情(COVID-19)将进一步推动这一市场的发
展。对机器人消毒解决方案、工厂和仓库中的机器人物流
解决方案或送货机器人的高需求,都意味着服务机器人市
场的增长趋势。
图1:2018-2023年,各类专业服务机器人的市场情况(按销售额)。

视觉系统设计 Vision Systems Design China Dec 2020/ Jan 2021 7


市场风向标 Market Trends

医疗机器人占据最大市场份额 野外现场服务机器人
从数值上来看,2019 年医疗机器人销售额占专业服 野外现场服务机器人包括用于农业、奶业、畜牧养殖
务机器人总销售额的 47%,创下了 53 亿美元的新纪录, 业和其他野外机器人,2019 年该类服务机器人市场的销
比 2018 年增长了 28%。这背后的主要驱动力来自机器人 售额同比增长 3%,达到 13 亿美元。新冠疫情有可能助推
手术系统,这是医疗领域最昂贵的机器人类型。到 2022 年, 了此类机器人的应用。例如,由于限制旅行,东欧的工人
医疗机器人市场的销售额将有望翻番,达到 113 亿美元。 无法像往常一样在收获季节到西欧工作,造成劳动力短缺,
大约 90% 的医疗机器人来自美国和欧洲的供应商。 当地农民可能通过使用野外机器人来解决这个问题。2019
年,农业机器人的销售额同比增幅可能超过 30%。
物流机器人市场迅猛增长
2019 年,物流机器人的销售或租赁额增长了 110%, 个人和家用服务机器人
达到 19 亿美元,其中绝大部分的销售都来自室内应用机 个人和家庭服务机器人主要面向大众市场,主要是一
器人。自主移动机器人一直应用于数字化生产的仓储领域, 些家用机器人,比如扫地机器人、割草机器人和娱乐机器
它们也是当今智能制造不可或缺的一部分。因此,预计物 人等。2019 年,个人和家用服务机器人市场的总销量超
流机器人的年营业额可能会继续保持 40%或更高的强劲 过 2320 万台,同比增长 34% ;销售额增长 20%,达到 57
增长。 亿美元。
“在生产制造过程中,物流服务机器人的投资成本可 近年来,两类最重要的产品——机器人吸尘器和玩具
以迅速回收。”IFR 主席 Milton Guerry 表示,“如果 24 小 机器人的单价一直在下降。目前,基础款机器人吸尘器的
时不间断运转,物流服务机器人的投资成本可在 2-3 年内 售价不到 100 美元。2019 年,全球 75% 的家政服务机器
收回,甚至更快。假设机器人的使用寿命为 15 年,运营 人(吸尘器和地板清洁器、割草机和其他家用机器人)由
成本约为年度投资额的 5%左右。” 美国公司生产。亚洲公司在全球市场占比为 19%,欧洲公
司为 6%。

图2:2018-2023年,个人/家庭用服务机器人的市场情况(按销售额)。

图3:2018-2023年,个人/家庭用服务机器人的市场情况(按销量)。
当下流行的“机器人即服务(RaaS)”这种业务模式,
降低了客户通过机器人实现自动化的门槛。这种模式的 老年人和残疾人用辅助机器人是一个快速增长的市
好处就在于客户不需要对硬件进行投资,所以公司不需 场。2019 年,辅助机器人销售额达到 9100 万美元,同比
要有固定资金、固定成本,也不需要专门的机器人操作员。 增加 17%。全球数目众多的研究项目,都聚焦在服务机器
机器人物流系统在非制造业业中应用的驱动力,主要来 人领域,许多国家都非常重视这个极具发展潜力的市场。
自大型电子商务公司实施的仓储解决方案。医院也蕴藏 与大多数娱乐机器人不同,老年人 / 残疾人用辅助机器人
着巨大市场增长潜力,主要是应用专业服务机器人来协助 属于高科技产品。
处理医院物流。在专业服务机器人领域,上述应用中大 “我们预计,专业机器人和个人服务机器人的销售额
约 90%的物流机器人是在欧洲和北美生产的,只有 10% 都将继续强劲增长。”IFR 主席 Milton Guerry 说道。
来自亚洲。

8 Dec 2020/ Jan 2021 视觉系统设计 Vision Systems Design China


技术趋势
Technology Trends

嵌入式视觉

FPGA 在嵌入式视觉系统设计中的应用
FPGA集低功耗、先进计算和安全性于一体,适用于从人工智能到无人机的多种包含视觉功能的应用。

文/ Apurva Peri,Microchip产品营销高级工程师

随 着 高 分 辨 率、 高 带 宽 需 求 的
监控设备、人工智能集成、实时分析 Centralized computing
infrastructure
以及物联网(IoT)应用的迅速增长, Data transmission Control and
人们越来越关注用于视频数据处理工 to cloud actuation

作的边缘计算。虽然边缘计算提供了
诸如改进响应时间、优化带宽预算和
数据隐私等好处,但它也带来了复杂
的挑战,如数据和设计安全问题,以 Data transmission to Control and
co-located processing units actuation
及有限的功率和小巧体积等问题。这
些限制要求使用具有高级安全特性的 Distributed computing
infrastructure
专用计算硬件。
中等密度的现场可编程门阵列 图1:边缘计算优化了响应时间,并节省了带宽。

(FPGA) 可 定 义 为 逻 辑 密 度 计 数 在 时分析和机器学习推理,是物联网的 为智能视觉系统提供一个有效的


100~500K 之间,这是相比于逻辑密度 核心。 边缘计算系统,需要灵活的硬件。这
在 1~9M 之间的更高密度的 FPGA 器 然而,集中式存储和计算模式并 种硬件要求能够支持多个传感器接
件而言的。高密度的 FPGA 广泛应用 不能为此类应用提供最佳方法,因为 口, 如 MIPI 和 SLVS ;支 持 具 备 先
于高级驱动辅助系统和数据中心等应 这种模式需要将数据传输到中央云服 进 图 像 处 理 能 力 的 HDMI、HDCP、
用中,而中等密度的 FPGA 则更适用 务器进行处理,然后再返回到设备端 USB 和 SDI 数据的传输 ;支持协议转
于部署到各种嵌入式应用中,如监视、 用于动作控制。边缘计算通过在数据 换、滤波、边缘和深度检测 ;并且功
网关设备、小型无线应用、医疗和工 源附近提供计算资源来解决这一问题 耗要小于 5W。FPGA 具有处理速度快、
业成像以及无人机(UAV)监控等。 (见图 1)。 可重构性强、成本低等优势,为满足
然而,边缘计算自身也存在复杂 嵌入式视觉系统的边缘计算需求提供
FGPA在技术演进中的作用 性和局限性,因为它要求加速计算性 了一个成本优化、功能强大的平台。
边缘计算是一种分布式计算,与 能,获得准确和可预测的结果,并且
集中式计算相比,它可以通过“使计 在功耗和空间占用方面存在严格的限 计算功耗和功率效率
算和数据存储更接近应用”,来提高 制。当应用中涉及到嵌入式视觉时, 逻辑元件是与存储器块联锁的
响应时间和节省带宽。随着物联网迎 这些限制因素变得特别复杂——因为 数字信号处理(DSP)阵列,它构成
来前所未有的不断发展,越来越多的 它们需要更大的散热空间、更高的分 FPGA 的构建块。硬件可编程 FPGA
商业和工业应用依赖于“基于传感器、 辨率、需要多个 4K/8K 数据通道,采 本质上是并行的,非常适合于在处理
数字和机械设备的”互联网络,来监 用电池供电,并且通常还要集成人工 过程中需要大量并行的特殊任务。硬
视和控制任务。无线嵌入式系统、实 智能和机器学习功能。 件可编程 FPGA 能够加速卷积神经网

视觉系统设计 Vision Systems Design China Dec 2020/ Jan 2021 9


技术趋势
Technology Trends

Frameworks AI/ML 而生畏,尤其是对于那些没有 FPGA


framework
经验的人来说。
一个典型的设计流程包括使用
NN engine 许多可用的 ML 平台中的一个,来获
Frameworks
Custom RTL
compiler 取工具、库和资源,从而为神经网络
Code generator
构建一个框架并生成相关的代码(见
Synthesis
Requires hardware Requires custom 图 2)。代码使用自定义寄存器传输
expertise implementations 级(RTL)编译器进行编译,然后遵
Netlist
定制和上市时间 循 传 统 的 FPGA 设 计 流 程, 即 RTL
灵活性代表了在基于视觉的机器 合成、网络列表生成、位置和路由。
Placement
学习设备中部署 FPGA 明显优势,原 FPGA 的编程模型与较大的软件开发
因有三。 社区不一致。虽然开发 ML 框架的平
Routing 首先,FPGA 将众多不同的资源 台有很多种,但每种平台都提供了独
集成到一个芯片组中,例如用于相机 特的设计结构、并需要定制实现,而
Processor
传感器接口的硬 IP 核和软 IP 核、控 且在 FPGA 行业中具有开箱即用体验
Accelerator
制逻辑、压缩算法、显示和网络接口, 的针对于特定应用的评估平台,也非
Silicon 以及一个有利于神经网络处理的架构。 常有限。投资硬件来验证 CNN(尤
图2:传统的FPGA设计流程涉及一系列复杂的任 其次,根据定义,FPGA 可以在 其是在评估多个平台以确定最佳选择
务,这对于没有FPGA经验的基于AI/ML的应用开
现场进行部分或全部编程。例如,如 时)也变得势在必行。
发人员来说,可能是一项挑战。
果开发人员要将已经部署的应用系统 一 个 没 有 FPGA 经 验 的 软 件 开
络(CNN)用于目标检测和识别以及 更新到最新的 HDMI、MIPI CSI 甚至 发人员,必须能够在一个无硬件评估
其他计算机视觉应用。FPGA 提供比 USB 版本,那么在 FPGA 上进行升级 和验证平台上编程一个经过训练的神
大多数 CPU 更强大的 DSP 功能,并 要 比 在 定 制 ASIC 上 更 容 易。FPGA 经网络,并且能够获得多个操作系统
且无需使用外部 DSP 元件,从而降 能够使人们构建经得起未来考验的、 的支持。为了应对围绕机器学习应用
低给定功能的总成本。此外,通过以 可扩展的设计,符合不断发展的标准, 而面对的 FPGA 编程挑战,需要将技
分布式方式将内存与核心计算单元互 并能根据修订后的规范重新配置硬 术和设计流程进行独特的组合。这样
连,FPGA 使处理更接近内存,这有 件。如果一个基于 MIPI 的图像处理 的组合必须提供广泛的互操作框架和
助于降低功耗。 系统需要升级以支持额外的相机传感 抽象硬件编程,允许开发人员在 C/
边缘设备可以部署在人迹罕至的 器接口,FPGA 可以在不修改系统的 C++ 环境中编码,并使用低功耗的神
偏远地区,一些关键应用可能需要不 情况下实现这种改变。这提供了显著 经网络。
间断电源,如航空视觉、医学视觉、 的成本和时间优势。 在 Microchip 为 其 PolarFire
交通监控和其他此类自动化过程。 此外,FPGA 也是可扩展的—— FPGA 提供的软件开发工具包(SDK)
与使用 GPU 的 CPU 相比,FPGA 如果一个算法或一项功能变得更庞 中,可以看到这种方法的案例(见图
在基于视觉的机器学习应用中的功耗, 大,FPGA 能更有效地实现可伸缩性, 3)。这样的工具包可以开发低功耗的、
比前者降低了 30%。在吞吐量相当的 满足新的编码需求。 灵活的基于覆盖层的神经网络应用,
情况下,FPGA 增强了热稳定性,并 而无需学习 FPGA 设计流程。套件包
优化了冷却成本。基于非易失性 Flash/ 实施挑战和要求 括一个位精确的模拟器,使用户能够
SONOS 技术的设备,其特点是收发器 虽 然 FPGA 代 表 了 在 边 缘 实 现 在软件环境中验证硬件的准确性。在
在架构上针对中带宽应用进行了优化, 基于 AI/ML 的功能的一个合适选择, 理想情况下,工具包还应包括神经网
从而在功率效率方面更胜一筹。 但是用 FPGA 进行设计可能会让人望 络 IP,以便在运行时加载不同的网络

10 Dec 2020/ Jan 2021 视觉系统设计 Vision Systems Design China


技术趋势
Technology Trends

理单元以及传输接口(如 CoaXPress、
Python-based network convertor tools
HDMI、10GigE vision、SDI 和 无 线

Pre-compiled smart camera


连接)。作为整个系统解决方案的一
hardware design 部分,一个非常适合于此类应用的
C/C++ based embedded FPGA,应该能够无缝地支持和集成
CC++ programming 不同的协议和接口,而开发人员只需
CNN1 CNN2
Change CNNs on the fly 为此付出最少的努力。
without reprogramming 为了克服延迟长的缺点,使计算
资源更接近数据源,分散边缘计算得
CNN1 CNN2
Runn CNNs simultaneously (time sliced) 到了广泛的应用。对于嵌入式视觉应
CNN3

图3:Microchip的VectorBlox accelerator SDK是其智能嵌入式视觉系统计划的一部分,其包括视频、图像 用,如自动驾驶车辆、监控和医疗成


和机器学习IP,以及用于加速“需要在低功耗、小尺寸下实现高性能设计”的工具。 像,成本优化的中等密度 FPGA 结合
模型,还应提供移植多框架和多网络 FPGA 必须提供具有竞争力的安全特 了高性能、设计灵活性和能源效率优
解决方案的灵活性。 性,以确保完整的设计 IP 保护、安 势。虽然复杂的编程模型给 FPGA 的
必 须 考 虑 安 全 性 和 可 靠 性, 以 全的数据通信和防篡改能力。 采用带来了巨大挑战,但是 FPGA 供
确保真实、防篡改和安全推理,尤其 在 嵌 入 式 视 觉 场 景 中, 深 度 学 应商一直在努力克服传统 FPGA 设计
是在监视或无人机等应用中。实时 习推理方案通常是更广泛系统的一 流程的挑战,弥合鸿沟,从而能更加
更新 FPGA 提供了一个基本的优势, 部分,该系统集成了相机传感器接 容易地创建基于 FPGA 的低功耗嵌入
因为敏感度可以用新的定义来处理。 口(如 MIPI 和 SLVS)、图像信号处 式视觉系统。

TM
光学引领未来

新品
成像光学产品目录!
Edmund Optics® 全新 2020 成像光学产品目录 – 专为
成像、机器视觉和检测应用领域的客户而设。成像光学元
件目录中包含1,700多款独特的现货成像镜头、相机、滤
光片、照明设备等。此外,目录内还包含50余页的技术内
容,协助您优化成像系统性能。
关注公众号

立即索取!

爱特蒙特光学(深圳)有限公司
中国深圳市龙华工业东路
利金城科技工业园3栋5楼,518109 欲了解更多信息,请点击此处:
Tel: +86 (0755) 8435 5459 Email: chinasales@edmundoptics.cn www.edmundoptics.cn/120-8630

视觉系统设计 Vision Systems Design China Dec 2020/ Jan 2021 11


技术趋势
Technology Trends

高光谱成像

高光谱成像的传感器和相机要求
通过适当的组件选择,高光谱成像技术可以在可见光波长之外,提供有效的图像捕获。

文/ Lu Cheng,Brad Coyle,Albert Tu

最初用于地球观测的高光谱成像 吨 的 塑 料( 见 图 2 上 )。 原理
(HSI)技术,已经拓展到了广泛的领 随 着 回 收 意 识 的 增 强, 高光谱相机
域,从工业分类到医学研究,例如, 更多的人希望他们的垃 沿Y轴存储的
X
InGaAs面阵 光谱信息
Y
科学家使用该技术生成皮肤和皮下组 圾能被回收,这意味着 图像传感器
棱镜/光栅
织的数据库。高光谱成像结合了相机 回收工厂将要处理更多 使输入光沿
Y轴分散
和光谱仪的优点(见图 1),能够同时 的 塑 料。 然 而, 不 同 的 波长
狭缝
收集空间信息和光谱信息。 塑料材料需要不同的回
随着图像传感器和相机的不断改 收工艺 ;如果因为使用
进,今天,研究和开发人员正在为高 错误的回收工艺而无法
光谱成像找到越来越多的应用领域, 区分它们,则可能会释
如食品质量控制、制药过程控制、塑 放出有毒化学物质,或 图1:推扫式方法是获取高光谱图像的一种技术。

料分类和生物测量等。 者是在处理过程中损坏仪器。利用高 次捕捉一条线(见图 3b)。pushbroom


光谱成像技术,回收工厂可以使用 相机沿着样本逐条线的扫描,生成完
应用案例 1.7~2.6µm 的光谱信息轻松区分塑料 整的图像。虽然比 whiskbroom 相机
(1)食品质量控制 材料(见图 2 下),并使用从相机收 更快,但是 pushbroom 相机可能会在
过去,食品质量控制需要进行破 集的空间信息标记传送带上的位置。 产生的图像中产生失真和移动伪影。
坏性的测量。质量保证人员在每批产 光谱扫描相机一次性收集给定波
品中选择一个样品进行取样,检查其 高光谱成像的类型 长的全部空间信息(见图 3c)
。根据
外观,并根据分析结果使用破坏性测 高光谱相机可以通过四种方式捕 一张图像 / 一个波长一次生成一个高
量技术来确定其质量等级。 捉信息 :whiskbroom 相机(点扫描)、 光谱立方体。虽然每幅图像都很快,
现在,SWIR 高光谱成像可以帮 pushbroom 相 机( 线 扫 描 )、 基 于 光 但是由于改变波长需要时间,因此光
助识别和量化食品的化学成分,根据 谱扫描的相机(区域扫描或平面扫描) 谱扫描生成立方体的速度较慢。
被分析的每个分子的不同吸收波长或 和快照相机(单次拍摄)。 高光谱快照相机可以捕捉高光谱
光谱指纹,提供诸如营养成分、脂肪 Whiskbroom 相机一次捕捉一个 视频(见图 3d),并且速度快,是拍
含量、糖含量和新鲜度等信息。例如, 单一像素(见图 3a)
。当相机光栅扫 摄运动物体的理想选择。然而,这类
无人机上的 SWIR 高光谱相机可以帮 描样本时,生成图像,并包含样本的 相机通常提供有限的光谱分辨率和空
助测量树上苹果的含糖量,并在收获 所有光谱信息。虽然这种方法的图像 间分辨率。
季节前预测苹果的等级和质量。 采集过程非常耗时,但其光谱分辨率
(2)塑料分类 非常高。 图像传感器的要求
2017 年,美国的塑料回收率为 pushbroom 相 机 比 whiskbroom 光学传感器独立于高光谱平台,
8.4%,而回收工厂每年会收到 300 万 相机更快,能提供高光谱分辨率,一 在数据采集中发挥着至关重要的作

12 Dec 2020/ Jan 2021 视觉系统设计 Vision Systems Design China


技术趋势
Technology Trends

有波长的曝光时间只能设置为一个
值,因此传感器需要有足够大的动态
范围,来获取非常低的信号和整个光
谱的峰值信号。
动态范围取决于读出噪声和传感
器的饱和水平。读出噪声通常决定传
感器可以检测到的最小信号水平。例
如,在 1.2V 饱和输出电平下,需要
800µV rms 读 出 噪 声 来 实 现 1500 的
动态范围,这对于 CMOS ROIC 设计
来说并不容易。在长曝光时间下,需
要考虑暗电流散粒噪声,特别是在使
用扩展 InGaAs 时。例如,在相同的
像素格式下,如果标准 InGaAs 传感
用高光谱成像法进行塑料筛选的案例 器(1.7µm 截止波长)的暗电流标称
可见光成像
1
光谱分布 高光谱成像 为 0.03pA,那么扩展 InGaAs 传感器
0.9 PVC
0.8 Acrylic (2.5µm 截止波长)的暗电流则可以
反射率

0.7 PET
0.6 PS
0.5 高达为 30pA。
PVC Acrylic PET PS 0.4 PVC Acrylic PET PS
0.3
0.2
0.1
(In collaboration with Spectral Application (3)灵敏度
在近红外区域内捕获 0 Research Laboratory Inc.)
带有波长信息的图像
1.3 1.5 1.7 1.9 2.1 传统光谱学的曝光时间可设置为
(1.3 µm to 2.2 µm) 波长 (µm) 通过光谱分布分析提取特征,
通过图像处理识别材料 长达 30s 左右,相比之下,高光谱成
图2:回收工厂(上图)每年回收300万吨塑料。高光谱相机可以区分四种不同类型的塑料(下图)。 像的曝光时间必须足够短(有时在毫
秒甚至微秒范围),以避免任何波长
用。本文将介绍高光谱成像所要求的 另一个例子是,检测牛肉中的脂 的饱和 ;如果传感器在任何波长下都
传感器规格。 肪 酸 需 要 使 用 1000~2300nm 的 光 谱 没有足够的灵敏度,短的曝光时间会
(1)光谱响应范围 范围。通过扩展的 InGaAs 技术,该 导致某些光谱带的曝光不足,以及光
相比于传统的 RGB 成像,高光 传 感 器 可 以 探 测 900nm~2.5µm 的 波 谱测量的低精度。
谱成像的主要优势在于,它能够在更 长,使其特别适用于超过 1.7µm 波长 传感器的灵敏度包括光电二极管
宽的光谱响应范围内、以更高的分 的高光谱成像。作为能够提供具有扩 阵列的光敏性和片上读出电路的电荷
辨 率 捕 获 更 多 的 细 节。 例 如, 利 用 展波长的 InGaAs 面阵图像传感器的 电压转换增益。然而,读出噪声电平
CCD 和 CMOS 图像传感器这样的硅 少数供应商之一,滨松光子发布了一 通常随着灵敏度的增加而增加。利用
技术,肉制品中的变色和一些异物, 系列 QVGA InGaAs 面阵图像传感器, 面阵扫描高光谱成像技术,可以为每
可以在 400~1100nm 的可见光和近红 感光截止波长分别为 1.7µm、1.9µm、 个波长设置合适的曝光时间或片上增
外范围内检测到。然而,使用反射成 2.2µm 和 2.5µm(见图 4)。 益。例如,可以为低信号范围设置长
像法检测肉的含水量(鲜嫩度)需要 (2)动态范围 曝光时间或高转换增益,也可以为强
900~1700nm 的光谱范围。在这个波 光学传感器的动态范围,对于在 信号范围设置短曝光时间或低转换增
长范围内,CCD 和 CMOS 传感器没 宽光谱范围内获取信息至关重要,尤 益,以便在整个波长范围内获得平滑
有足够的响应,而标准 InGaAs 技术 其是在采用推扫式技术进行图像采集 的输出光谱。滨松光子提供线阵和面
能以很不错的成本实现 70% 以上的 时。推扫式相机可以在捕捉到整个图 阵 InGaAs 图像传感器,具有可编程
量子效率。 像线的同时,获取光谱信息,并且所 的片上电荷 - 电压转换增益。

视觉系统设计 Vision Systems Design China Dec 2020/ Jan 2021 13


技术趋势
Technology Trends

而且可以节省数据存储和数据处理的
A: Whiskbroom scanning B: Pushbroom scanning
工作量。

Spectral dimension

Spectral dimension
Spatial X
HS camera HS camera scanning

Lens
Spatial XY
Lens 相机要求
Point scanning Y
X Line Spatial X (1)相机
scan scan scanning
高光谱成像相机有两种类型 :线
Sp

Sp
at

at
ial

ial
dim

dim
Spatial XY 扫相机面阵相机。
en

en
scanning
sio

sio
线扫相机集成了一个线性的 1D
nY

nY
Spatial dimension X Spatial dimension X
传感器,并提供超过 40,000 lines/s 的
C: Spectral scanning D: Snapshot 高帧率优势,非常适合装配线上的在
HS camera
Spectral
scanning ? HS camera 线检测应用。当与人工智能(AI)结
Y Y
合用于缺陷识别或模式识别时,线扫
Lens io
n Lens io
n
ns ns
di
m
e
di
m
e 相机是检测系统中的一个核心价值部
l l
ra ra
Area X ec
t Single X ec
t
scan Sp
shot Sp 分,因为其高的采集速度实现了基于
Sp

Sp

AI 的分类和缺陷识别任务。
ati

ati
al

al
dim

dim

面阵扫描相机集成了一个 2D 传
en

en
sio

sio

Spectral
nY

nY

scanning
Spatial dimension X Spatial dimension X 感器,通过生成整个场景的快照图像
图3:高光谱相机类型及其各自采集和数据存储的方法:(a)Whiskbroom相机;(b)推扫式相机; 来提供丰富的空间信息。典型的面阵
(c)基于光谱扫描的高光谱(HS)相机;(d)快照相机。
扫 描 InGaAs 相 机 有 QVGA 或 VGA
(4)快速捕获图像 :IWR 和 ROI 量的应用。滨松光子的图像传感器采用 格式(见图 5a)
。这种相机可以快速
作 为 目 前 最 流 行 的 高 光 谱 成 列并行结构和局部读出(ROI)特性,不 捕捉许多图像,提供大视场,适合农
像 方 法, 推 扫 式 方 法 以 BIL 格 式 仅可以按像素数成比例缩短读出时间, 业领域的广域成像应用。
(band-interleaved-by-line,在一个方 高光谱成像相机也广泛应用于食
向上连续扫描的一种机制)存储高 品检验、安全、塑料分类和毒品检测
光谱数据立方体。因此,推扫式相 领域。大多数相机的传感器上都有制
机机特别适用于工业过程中(如食 冷功能,可以降低噪音和暗电流,提
品质量和安全检查、回收工厂的分 高整体图像质量。板载内存或用户可
类以及药品的标记和包装等)常用 访问的 FPGA,还可以实现高光谱相
的传送到系统。对于具有快速移动 1.5 机的定制化。
Tchip = 25°C G11476 G11477 series
Tchip = – 10°C series
对象的应用,快速捕获图像变得至 Tchip = – 20°C G11478 (2)接口
series
关重要。不仅曝光时间短,而且传 接口选择是选择相机的一个重要
1.0
感器的结构设计可以提高读出速度。 考虑因素,因为它定义了相机的速度、
光敏性 (A/W)

例如,片上采样和保持电路启用了 G11508 连接性以及它与其他设备的集成程度


series
集成时读出(IWR)功能,因此传 0.5 (见图 5b)。相机有许多种类型的接口,
感器可以在整个线路读出时开始第 设计用于不同的目的。USB 和 GigE
二次曝光。 G11475
series 是最常见的接口,另外还有 RS-422/
0.0
面阵扫描方法以一系列波长记 0.5 1.0 1.5 2.0 2.5 3.0
LVDS 接 口、Camera Link 接 口、RS-
录空间和光谱信息,这使得它对于 波长(µm)
232 和 CoaXPress 接口。
图4:滨松光子的G14741-0808W InGaAs面阵图像传感器
快速成像应用很有吸引力,但是面 (3)软件支持
(上图),提供了图表(下图)中所示的光敏性和光谱
阵扫描相机不适合需要移动样本测 响应曲线。 将正确的软件与高光谱硬件

14 Dec 2020/ Jan 2021 视觉系统设计 Vision Systems Design China


技术趋势
Technology Trends

模拟视频 编程工具,否则将会导致昂贵的系统
数字视频
偏压
A/D USB 重新设计。
控制器 数字 高速通信 3.1
InGaAs 时钟信号 模拟前端 控制器 控制器
控制
图像
传感器 结论
温度控制器
高光谱成像结合了相机和光谱仪
中 工 作。 目 前, 市 场 上 存 在 许 多 第 的特点。使用一台高光谱相机代替一
三方软件平台,如美国国家仪器公 个相机和一个光谱仪,可以同时采集
司 的 LabVIEW、MathWorks 公 司 的 光谱信息和空间信息,从而节省时间
MATLAB、 康 耐 视 的 VisionPro 以 及 和成本。过去的图像传感器和相机,
Datalogic 公司的 IMPACT,它们都与 在速度、分辨率、灵敏度和软件方面
不同的相机硬件有着很好的集成度。 都有一定的局限性。新技术的进步,
对于希望自己编程一个接口的用 已经使高光谱成像变得比以往任何时
户来讲,软件开发工具包的支持,也 候都更加容易。滨松光子等公司已经
是一个主要的考虑因素。编写自定义 开发出能够提供高速度、高分辨率和
图5:滨松光子的C14041-10U QVGA InGaAs面阵 接口允许用户完全控制最终用户体 高灵敏度的图像传感器和相机。改进
扫描相机和相机设计框图。
验。Python 和 C++ 是常用的编程语言, 的软件和编程工具,使得在任何应用
配对,是系统开发中的一个关键环 而 Linux 操作系统为控制设备和数据 中部署高光谱成像变得更加容易。今
节。必须考虑硬件驱动程序的支持情 流提供了很大的灵活性。作为一个开 天,已经有许多高光谱成像方案可供
况,因为相机必须在选定的软件环境 发人员,必须确认相机能够支持这些 选择。

视觉系统设计 Vision Systems Design China Dec 2020/ Jan 2021 15


技术趋势
Technology Trends

相机接口

嵌入式机器视觉相机的接口选择
MIPI CSI-2或FPD-Link III相机接口,能直接与图像信号处理器连接,为嵌入式视觉
应用提供更大的灵活性。

文/The Imaging Source 映美精相机

嵌入式视觉系统精巧的体积、经
济的价格以及高度灵活的整合特性,
让许多厂商纷纷投入研发设计的行
列。在许多方面,虽然嵌入式视觉系 图1:无论应用需求为MIPI CSI-2或FPD-Link III接口、高分辨率或高帧速率,The Imaging Source均能提供
统还只是刚开始被广泛应用于商业 丰富的嵌入式视觉相机模块,以满足各类需求。

中,但仍然不会改变这一技术将对未 Sony 和 ONSemi 最 新 的 CMOS 图 像 特别具有成本效益优势。ISP 能够处理


来产业带来巨大改变的潜力。嵌入式 传感器技术(全局和卷帘快门,分辨 硬件加速的操作,如去马赛克、色彩
视觉系统的高度灵活性,也使得开发 率从 0.3~8.3MP)。 校正、色彩空间转换、白平衡、镜头
人员必须多方考虑,包括挑选适合 校正和图像数据压缩
(如H.264/H.256)

的硬件界面、处理平台等,以下 The 为何选择MIPI CSI-2或FPD-
Imaging Source 映美精相机将分享嵌 Link III相机接口? 平台为嵌入式视觉带来AI优势
入式机器视觉相关的应用接口。 有些使用者可能想知道为何选择 除 ISP 外, 上 述 NVIDIA 嵌 入
MIPI CSI-2 或 FPD-Link III 相机,而非 式 计 算 机( 例 如 NVIDIA Jetson Nano,
MIPI-CSI-2及FPD-Link III相 USB-3 或 GigE 相机。其原因在于嵌 Xavier NX* 及 AGX Xavier*) 提 供 了
机接口 入式平台本身的硬件功能特性,即硬 具有 CUDA 内核的 GPU 和多个 MIPI
许多嵌入式机器视觉应用(尤其 件加速的图像信号处理器(ISP)
。嵌 CSI-2 相机接口,使它们能够更好地适
是多相机设置)需求的数据线长度, 入式平台的 MIPI CSI-2 接口可以直接 用于 AI 和要求严苛的机器视觉应用。
超过 MIPI CSI-2 相机所能及的最大值 连接ISP,
以避免延迟及数据转换问题。 NVIDIA 平台能够并行运作多个神经网
(即 20cm)。借助 FPD-Link 桥接器即 The Imaging Source MIPI CSI-2 相 络,以执行图像分割、图像分类和对
可将其数据线延长至 15m。图像数据 机经过专门设计,可以将原始图像数 象识别。NVIDIA SDK“JetPack”支持
通过纤巧的同轴电缆(Ø2.8mm)以 据直接传输至接口。这类嵌入式板载 所有基于 NVIDIA Jetson 的嵌入式平台。
高 达 4.16Gbps 的 速 度传输,同时传 相机仅包括最必要的基本功能,因此 NVIDIA 提供广泛的软件库,可
输影像数据、控制指令及供电。 以进行深度学习以及图像和视讯处理。
如 此 一 来, 其 带 宽 充 裕, 可 以 The Imaging Source 提供相应的相机驱
从 5MP 相机中,以 30fps 的帧速率传 动程序,能够完美地集成至 NVIDIA
输图像数据。开发人员可以在 MIPI 软件框架中。图像数据能够直接
CSI-2 和 FPD-Link III 板 机 地传输至预训练的深度学习
亦或具备 IP67 防护等级 模块。
外 壳 的 FPD-Link III 相 图2:两台相机开发工具包, 对于要求不高的图像处理任务,
搭配N V I D I A J e t s o n N a n o 具 备 MIPI CSI-2 相 机 接 口 与 ISP 的
机之间进行选择。此精
(MIPI CSI-2接口)并增配自
巧相机提供黑白与彩色版本,采用 动散热功能,防止过热降频。 Raspberry Pi 4 会是一个极佳的选择。

16 Dec 2020/ Jan 2021 视觉系统设计 Vision Systems Design China


技术趋势
Technology Trends

Edge机器视觉
经济高效的运作能力、升级的机
器学习运算以及整体上减少系统占用
空间,使边缘计算和 AI(尤其是深度
学习)的发展得以融合。深度学习为
检验标准不易量化或定义的应用,提
供了机器视觉解决方案,为检验、装
图3:载板附带6个使用Jetson AGX Xavier的FPD-Link III相机模块。
配和质量保证应用提供了新的可能性。
NVIDIA 优 异 的 AI 功 能 与 The
Imaging Source 丰富且坚固可靠的工
业相机相结合,使得嵌入式视觉开发
人员能够实现以往无法实现、或是需
要大量编程工作才能实现的应用。
(* The Imaging Source 最 新 嵌 入
式产品可支持 NVIDIA's Xavier NX 与
图4:低成本的处理性能、深度学习技术的进步和高性能传感器,使得基于边缘的视觉应用越来越多地被采用。 AGX Xavier 平台预计将于近期供应,
相同地,MIPI CSI-2 接口也能够直接 够压缩高分辨率 H.264 图像,并通过 如您希望产品供应后获得通知,请与
连接至 ISP。 例如,Raspberry Pi 4 能 以太网或 WLAN 发送。 The Imaging Source 相关业务联系。

视觉系统设计 Vision Systems Design China Dec 2020/ Jan 2021 17


Cover Story
封面故事

3D测量

3D 扫描仪测量和检查航空航天涡轮叶片
机器人、蓝光3D扫描仪和软件,帮助加速航空航天涡轮叶片的上市时间。

文/Joe Gugliotti,Marc M. Landman

由于时间、精度和细节在航空航 公司,利用自动化蓝
天工业中至关重要,因此航空航天工 光 3D 扫 描 系 统 取 代
程师经常部署有助于加速或增强质量 了 CMM。该 3D 扫描
检查等过程的技术。例如,航空航天 仪基于条纹投影技术
工程师必须有效测量和检查具有严格 和蓝光 LED 光源,提
公差的大型发动机部件,以满足质量 供精密、准确和高质
和精度要求。涡轮叶片的几何形状具 量的输出,原因在于
有至关重要的复杂细节,例如前缘和 其 较 窄 的 440~480nm
后缘,这使得使用传统的接触式计量 波长,有助于有效滤
系统(例如坐标测量仪 CMM)测量 除来自车间等工业环
这些组件不但非常困难,而且效率低、 境的环境光干扰,从 图1:Capture 3D的ATOS ScanBox自动化3D扫描和检查解决方案,用于
费力耗时。 而能捕获清晰的数据。 测量航空航天涡轮叶片,以进行走向和统计过程控制分析。

为了减少检查时间并增加复杂的 蓝光还具有比其他光源更高的分辨 图 1),检查时间大约为 45 分钟,相


涡轮发动机组件(例如整体叶盘)的 率,从而可以实现高度精确测量。 比使用 CMM 的 18 小时,检查时间
生产吞吐量,美国康涅狄格州的一 GOM 公 司 的 蓝 光 3D 扫 描 仪 使 大大减少。
家航空航天公司,通过德国 GOM 公 用带有 Plus 摄影测量附件的 ATOS 5, 使用 CMM 捕获整体叶盘独特区
司的美国分销商和集成商 Capture 3D 配置了 ATOS ScanBox 进行自动化(见 域的准确测量值时,例如喉咙面积、
前缘和后缘半径、弦长、厚度以及弓
首和扫掠,这需要耗时的点对点测量,
并且仅产生受限于检查区域的结果。
以前,CMM 使用预先定义的单个点,
技术人员对其进行编程,以移动测头
接触表面。通过 3D 扫描,该公司通
过捕获完整的数据场,来一致地对整
个零件进行成像,提供物体表面的形
貌图并可视化有问题的区域,从而使
其对机翼部件检查特别有效(见图 2)。
与平滑区域相比,CMM 可能会
遗漏的错误包括与设计意图偏离的公
图2:ATOS 5检查涡轮发动机组件,例如叶片、定子和压缩机,能轻松地数字化复杂形状的边缘和表面,
实现出色的质量控制。 差、工装走向以及局部凹痕和凸起。

18 Dec 2020/ Jan 2021 视觉系统设计 Vision Systems Design China


封面故事 Cover Story

然而,高分辨率 3D 测量数据和生动 人、钣金安全防护罩以及集成


的色彩图能显露出这些错误。拥有全 的旋转台,该旋转台为机器人
面的零件信息可以使公司的研发、质 移 动 提 供 了 额 外 的 轴。ATOS
量和生产部门迅速适应不断变化的设 ScanBox 配置有 ATOS 5 3D 扫
计要求,这就是为什么公司部署蓝光 描仪,并带有摄影测量软件附
3D 扫描仪来对整体叶盘和其他组件, 件、参考系以及附带的 ATOS
包括风扇叶片、压缩机叶片、涡轮机 Professional VMR( 虚 拟 测 量
叶片(见图 3)和喷嘴导流叶片进行 室)软件。
质量检查的原因。 Capture 3D 提 供 项 目 模
对于需要使用 3D 扫描仪的机翼 板,其中包括虚拟测量室,该
特征,该公司的整体叶盘检查时间达 测量室包含带有数字化参考
到约一小时,而风扇叶片的检查时间 系的零件的计算机辅助设计
不到 20 分钟,在不到 1/5 秒内完成数 (CAD)模型,以及检查计划。
据采集。该公司还实现了低于 5μm 检查计划包括影响整体叶盘性
(0.005mm) 的 重 复 性 测 试, 有 效 地 能的关键区域,例如前缘和后
加快了整体叶盘产品的上市时间。 缘半径,各种弦长以及几何尺 图3:ATOS Professional软件通过使用航空航天业特定的计算来
ATOS ScanBox 包 括 来 自 日 本 寸和公差(GD&T)要求。检 生成数据,以标注对其功能至关重要的特定整体叶盘特征。

发 那 科 的 LR Mate 200ID 工 业 机 器 查计划包含根据附加到计算机辅助设 计(CAD)模型的标称几何构造建立

视觉系统设计 Vision Systems Design China Dec 2020/ Jan 2021 19


封面故事 Cover Story

图5:ATOS Professional参数检查软件使用其机翼计算功能自动
执行分析,以快速分析航空航天特定的特征。

图4:ATOS的整体叶盘应用所使用的参考系的成本比传统的CMM夹具低得多,从而可以提高
量的质量,并监视设置的稳定性,这
需要高精度的项目的精度。 是一项重要的考虑因素,因为温度或
的这些类型的详细信息请求。 尽可能有效,并带来最佳可能的测量 系统移动等外部因素会影响 RPT 星
使 用 基 于 模 型 的 定 义(MBD), 可重复性。 座图在参考系上的恒定性。
所需的标称几何形状会随 CAD 模型 接下来,机器人移动 3D 扫描仪, 摄影测量软件附件通过在扫描之
自动导入到软件中。然后,工程师将 该扫描仪从不同的方向收集整体叶盘 前和扫描过程中提供最新的星座图或
测量原理应用于标称几何形状,以便 表面数据,因为需要以特定的方向扫 摄影测量会话来解决变化,RPT 的使
从整体叶盘蓝图获得基本工程规格的 描每个叶片边缘,以收集锋利特征所 用使软件可以监视在测量过程中可能
值。VMR 软 件 与 CAD、MBD 和 产 需的细节。作为标准安全设置的一部 发生的潜在变化。每个 3D 扫描位置
品制造信息(PMI)数据集成在一起, 分,外壳内部的所有内容都在软件中 都包含一些 RPT,将这些 RPT 与星
并将这些元素包括在计划中。 建模,包括夹具中的部件(见图 4)。 座图进行比较,以精确地知道它们所
为了开始测量过程,技术员将整 VMR 软件通过使用 CAD 文件,自动 属的位置。结果是整体叶盘高度准确
体叶盘固定在围绕零件的夹具(称为 对机器人的运动进行编程,而不是使 的 3D 模型。
参考系)中。参考系具有参考点目标 用更耗时的示教方法或手动记录机器 扫描完成后,另一软件功能自动
(RPT),可以提高最终精度,而不必 人位置,从而节省了时间。该软件与 使用项目模板执行分析过程。ATOS
直接将目标添加到整体叶盘上。通常, 机器人和移动的旋转台进行通信,以 Professional 软 件 自 动 将 扫 描 数 据 与
整体叶盘的尺寸为 1m 或更大,如果 收集整个部件的数据,因此工程师不 CAD 数据对准,并生成包含尺寸的
没有参考系,技术员将需要将许多此 必花时间对每个位置进行编程。 完整检验报告,包括 GD&T 所需的
类粘合目标物手动放置在较大的物理 VMR 的 Smart Teach 功能可以预 尺寸。该软件还使用其机翼计算功能
部件上。参考系使这种对目标的使用 先模拟机器人的运动,自动围绕整体 来快速分析航空航天工程特定的特
叶盘编程路径,并插入任何 征,例如边缘点和边缘圆的创建、厚
必要的位置,以在最佳扫描 度、外倾线和喉咙区域(见图 5)。
位置安全地围绕部件移动。 作为检查报告的一部分,该软件
最后,技术员激活系统,然 生成彩色图(见图 6),表示数据的
后开始测量。由于整体叶盘 偏差以及相关区域中的整体叶盘是在
的尺寸、锋利的边缘和复杂 公差范围内或范围外。这家航空航天
的形状,准确地测量和追踪 公司依靠这些全彩色图来更快、更清
RPT 星座图,对于将每次扫 晰地解释结果,而不是试图解释来自
描收集的数据正确地转换为 CMM 的电子表格和数据表,相比于
公共坐标系至关重要。利用 以前所使用的技术,这又是一大明显
图6:ATOS Professional软件生成带有彩色覆盖层的数字化整体叶
盘。颜色差异表示整体叶盘在公差范围内或超出公差范围的区域。 RPT,系统可以追踪每次测 优势。

20 Dec 2020/ Jan 2021 视觉系统设计 Vision Systems Design China


应用与解决方案 Applications & Solutions

深度学习

深度学习系统助力交通执法
精准调整的卷积神经网络(CNN)和稳健的结果监控,帮助交通执法部
门实现精准执法。

文/Dennis Scimeca

创建这样一套探测设备系统—— 当车辆驶入相机的视
运行于该设备之上的深度学习系统, 野中时,MPaSD 探测设备
能对行驶中的车辆进行探测,并判断 捕获驾驶员的图像。运行
驾驶员是否在驾驶中系了安全带或是 在设备上的 CNN 系统对图
否在使用手机,并且要求具有不低于 像进行分析,并确定驾驶
90% 的判断正确率,这是一项极富挑 员是否违反了规定——没
图1:手机和安全带探测(Mobile Phone and Seatbelt Detection)系统
战性的任务。开发一种能够在各种环 有系安全带或是在方向盘
对驾驶员图像进行分析,从而判断驾驶员是否系了安全带,或驾驶
境变化中,对行驶在至少三车道、速 后使用手机。 员是否正在使用手机。

度达 80kmph 的车辆进行清晰的图像 对是否系了安全带,系统可选择 工程师们对 Axis Communications


捕获的系统,难度又进一步增加。 的类别有“是”和“否”两种。对于 公司的 P1375-E 网络摄像头、索尼公
对于道路安全应用 AI 系统应用 是否使用了手机,系统则提供了更加 司 采 用 IMX267 的 摄 像 头、Hanwha
开发商 Hazen.ai 来说,灵活的卷积神 复杂的判断结果。依据驾驶员手持手 Techwin 公司的 XNO-6120R 摄像头、
经网络(CNN)、稳健的可观测性和 机的位置,CNN 能够识别出驾驶员 Pelco 公 司 的 IBP831-1ER 枪 式 摄 像
监控堆栈技术,再加上与当地执法部 是使用手机通话还是发短信之间的区 头、海康威视的 DS-2DE54321W-AE
门的密切协作,这些都是成功解决这 别。该模型也给出了第三种图像分类 智能球形摄像头进行了一系列测试,
些挑战的关键。 “模糊”,表明图像太模糊以致于模型 最 后 选 择 了 Axis Communications 公
手 机 和 安 全 带 探 测(Mobile 不能确定地给出“是”或“否”的结论。 司的 P1375-E。
Phone and Seatbelt Detection,MPaSD) 每幅被分类为违规的图像都存储 Amin 表 示, 之 所 以 选 择
设备,专门为交通执法部门而设计, 在内存中,被客户(如执法部门)周 P1375-E,是因为它在成像质量和价
安装在道路一侧的立柱上或道路上方 期性地发送到后台系统。那些没有违 格方面都比较有优势,它正是他们
的路标架上。路标架安装具有较少的 规的图像则被从设备中清除。客户可 在寻找的、能够推荐给客户的产品。
遮挡问题,但是成本更高。路边立柱 以对这些图像进行重审,通过车辆的 Amin 强调,Hazen.ai 本质上是一家软
安装在视频分析方面会更具挑战性, 车牌号来识别驾驶员,并向违规者开 件公司,因此他们尽可能多地支持不
但是成本更低,且安装更方便。 出罚单。 同种类的摄像头,以供客户自由选择。
Hazen.ai 首 席 技 术 官 Khurram 开发 MPaSD 探测设备,需要克 设计阶段,他们遇到了第二个挑
Amin 介 绍 说,Hazen.ai 与 客 户 一 起 服三大挑战。第一,MPaSD 探测设 战 :要建立一个不需要经常与网络进
为 MPaSD 探测设备的位置安装和硬 备需要足够高质量的图像,要可靠地 行通信的边缘系统。这意味着,这需
件 安 装 提 供 指 导。 他 指 出,MPaSD 保证复审人员对图像中驾驶员是否系 要确保 MPaSD 探测设备具有相当的
探测设备安装的最佳位置通常是显而 了安全带、或是否在行驶中使用了手 计算能力和数据存储能力。
易见的。 机的判断,高度一致。 应 对 上 述 挑 战, 在 处 理 器 方

视觉系统设计 Vision Systems Design China Dec 2020/ Jan 2021 21


应用与解决方案 Applications & Solutions

面可以有如下两个选项 :一是来自
NVIDIA 公 司 的 嵌 入 式 设 备, 搭 配
了 ARM 处 理 器 和 嵌 入 式 GPU, 如
Xavier NX 模组和 Jetson TX2 ;另一种
是工业级 PC,但至少要配备英特尔
i9700K 处理器,或是具有 8GB DDR4
RAM 的更高性能的 CPU。Hazen.ai 公
司推荐使用基于 PCIe 的英特尔 Neural
Compute Stick(神经计算棒)来进一
步增强工业级 PC 的性能。
Amin 表示,每幅违规图像通常
需要 5MB 的数据存储空间。内部测
试表明,捕获的图像中违规的不到 图2:MPaSD探测系统的用户界面,允许客户对系统捕获并判为违规的图像进行重审。

1%。 如 果 有 10 万 辆 车 经 过 了 这 套 集图像的最佳位置。一起合作的数据 正,以得到精准的判断结果。


探测设备,那么可能有 1000 辆车是 公司,进行了地面情况分类以创建训 稳健的监测系统在每个部署地点
违规的,仅需要 5GB 的数据存储量 练数据集,并对内部测试期间 CNN 持续运转 :交通执法人员基于 CNN
就够了,这个数据量对固态存储器 识别结果的精确性进行了验证。 图像归类发送罚单。在法律管辖限度
(SSD)来说微不足道。 像 Caffe、TensorFlow 和 PyTorch 内,在发送基于图像的罚单之前,执
而且,当设备把数据发送给后台, 等高级深度学习架构,都为 CNN 设 法人员必须对该探测设备捕获的图像
设备上的数据不再被存储,存储空间 计和训练提供框架结构。依据所使 进行复审。误判(误报)为违规的图
的容量被不断释放。专利的 API 接口 用 的 硬 件, 模 型 可 以 用 C、C++ 或 像会被记录在册,这也为模型的预测
允许该探测设备和由执法部门维护的 CUDA 语言编写,尽可能多地提升计 精准度提供一个度量标准。
违规处理的任何后台进行交互。 算能力。此外,还对单个芯片组做了 然而漏报的违规更难以发现。只
第 三 项 挑 战 更 为 严 峻, 因 为 进一步优化。 有误报的结果会发送到后台,而其他
MPaSD 探测设备运行在边缘。如果 Hazen.ai 还会组织实地测试,从 数据则被清除。目前正在开发的线程
违规图像百分比突然上升,或在正常 而对 CNN 系统的判断归类和实际情 将允许执法人员对图像复审,并分配
该出现违规图像的时间段内没有出现 况进行比较。如果有需要,CNN 系 标签,从而生成在特定部署中需要仔
违规图像,这说明系统出现错误的迹 统在每一个测试点都会被精细调整, 细调整模型的图像。
象已经比较清晰了。这些错误在下一 以满足部署的独特条件要求,从而确 据 Amin 透露,该探测设备已经
次数据传输之前并不会被注意到,然 保 CNN 系统的识别一致性精度稳定 在 5-10 个不同的场所进行了现场测
而,这会导致在较长的时间里探测设 在 90% 以上。精细调整涉及的对象 试,并于 7 月在埃及开始为一个客户
备无法正常工作。Hazen.ai 已经开发 很具体,如太阳光照射到摄像头的角 进行现场部署。在目前的商业部署中,
出稳健的、内部可观测和监测的堆栈, 度、眩光、建筑物投下的阴影,或者 不系安全带和违规使用手机的识别精
对该探测设备进行持续监控,当任何 连续大雨等常见天气条件,都需要对 准度,分别为 95% 和 92%。
这类异常发生时自动生成报警。 CNN 系统进行精细调整。 Hazen.ai 与客户的每一份合同中,
Hazen.ai 公司在差不多两年的时 Amin 介绍说,如果需要,公司 都包含 Hazen.ai 是否可以使用探测位
间里,利用数万幅训练图像,开发了 可以用大约 1000 幅违规图像在一到 置所产生的数据的条款。如果客户允
其基础 CNN,这也是该探测设备的 两天的时间内,完成程序训练部署。 许 Hazen.ai 使用数据,则该站点的模
核心预测模型。Hazen.ai 公司与当地 用于补光或快门速度调节的额外照 型微调都会并入核心 CNN 中,从而
执法部门合作,确定了安装摄像头收 明,也可以提供优化图像所需要的校 产生一个更为稳健的基准模型。

22 Dec 2020/ Jan 2021 视觉系统设计 Vision Systems Design China


应用与解决方案 Applications & Solutions

光源与照明

面向食品和饮料检测的机器
视觉照明优化方案
定制的特定波长的LED光源,能揭示出隐藏的或难以检测的信息。

文/Marc Landman,Paul Downey

正确地检测食品、饮料和与其相
关的包装等,需要具备对尺寸、形状、
颜色、缺陷种类以及完整性等相当广
范围的参数进行处理的能力。为了实
现这样的目标,在检测时,优化照明
的强度、均匀性和光源的几何形状,
对于获得具有良好对比度和信噪比的
图像,至关重要。
除 此 之 外, 有 机 物 和 无 机 物 对
光的吸收特性不同,这也使得为具体
应用选择合适的照明波长成为一项挑
战。为了做到最佳的照明选择,工程 图2:SWIR照明使塑料容器上的标签变得透明,从而能够轻松测量容器内液体的位置。

师和集成商们必须理解关键的照明因 的农产品(如水果、蔬菜、大米、玉 明更多的探测信息。LED 光源能够


素,并了解能够实现最佳照明效果的 米、坚果、大豆以及咖啡等)因为异物、 提供覆盖所有这些波长的照明,能够
最新技术。 霉菌、病虫害而导致的缺陷和污染的 满足广泛的检测需求。如果样本存在
根据波长的不同,可见光(RGB)、 检测,尤其有效。 多种类型的缺陷,而每种缺陷需要不
近 红 外 光(NIR) 和 短 波 红 外 光 通 常, 检 测 每 种 颜 色 都 存 在 最 同波长的照明才能比较容易地检测出
(SWIR)都可能会在检测中扮演照明 佳波长。比如糙米,在 1550nm 波长 来,这种情况下,使用多个不同波长
光源的角色。例如,红外波长对收获 SWIR 光的照明下,能够表现出比红 的 LED 光源是最好的选择。
米更强的光吸收特性(见图 1)。和基 相较于传统上用于高光谱成像的
于水的液体在 SWIR 光照条件下呈现 卤钨灯,宽带 LED 高光谱光源能更
出黑色一样,SWIR 光能够有效地测 好地服务于热敏产品的检测。传统的
量玻璃瓶和在红外光下透明的塑料瓶 照明方式,除了产生所需要的照明波
中,填充的液体水平(见图 2)。类似 长之外,还会产生额外的热量。这些
水果皮下淤伤这样的缺陷,在白光照 热量可能会使温度超过 100℃ ;因此,
明条件下极难探测到,但在红外照明 依据卤素灯泡的类型不同,还经常需
条件下却极为明显(见图 3)。 要采取主动或被动冷却措施。相比之
紫外光(UV)、红光、绿光和蓝 下,现在的宽带 LED 光源在工作时
图1:用波长1550nm的短波红外光(SWIR)为糙米
提供照明,糙米对该波段的光具有更强的吸收性。 光照明,也经常可以显现出比白光照 并不怎么产生热量,因此可以保证在

视觉系统设计 Vision Systems Design China Dec 2020/ Jan 2021 23


应用与解决方案 Applications & Solutions

类光源高 10 倍,能够极大增强高速
检测应用的成像对比度。使用 HOP
技术的光源,能够产生高度聚焦的
SWIR 光束,也能实现大面积、均匀
的 SWIR 照明,还能实现特定的投影
模式。
这些 HOP 光源,能够与大多数
EFFILUX 的标准照明配置兼容,可
以为常用的 SWIR 相机应用提供极具
扩展性的照明解决方案。

图3:苹果上的皮下淤伤在RGB照明(左)条件下无法检测出来;SWIR照明则可让淤伤清晰可见(右)。 高光谱成像也对热封包装的产品
检测很有帮助,它可以检测密封件本
身是否有杂物污染。红外光源穿透包
装,污染物会在特定波长光源的照射
之下显现出来,这使污染物化学成分
的分析成为可能,这种分析进而也会
使污染源的识别与消除得以实现。
在确定了 LED 光源合适的波长
图4:使用红光LED的平顶光源可以消除糖果包装纸上反射的眩光,提升日期编码的成像对比度。
之后,还需要选择光源的形状或外形
使用过程中不会加热、软化或损坏被 和孔洞等缺陷。 尺寸。市面上的 LED 光源通常有环形、
检测对象。 更长的波长或者 SWIR 照明,也 圆顶形、同轴、准直、条形和线形等
食品和饮料包装涉及广泛的材 经常用于食品和饮料的检测中,特 多种形式。为了展示红光 LED 光源
料、类型和尺寸,其中每一项的检测 别是包含水或潮湿物的检测中。然 在这项应用中的价值,图 4 展示了使
可能都有对应的最佳照明波长。比如, 而,SWIR LED 照明的一个常见问题 用平顶光源的好处 :它能产生漫射光,
在图 4 中,包装材料的反射会干扰机 是,与标准的可见光 LED 照明相比, 实现均匀照明,消除反射。这个例子
器视觉系统正确读取包装上打印的文 SWIR LED 的光照强度较低。 中的平顶光源只有 10mm 厚,适用于
字。使用红光照明,可以使黄色包装 最 近,CCS 集 团 全 资 子 公 司 检测空间受限的场合。
在输出图像中更亮,因此,包装上印 EFFILUX 研发出一种专有材料,基 环形光源能从上方照亮检测对
在白色和黄色底色上的文字,会与背 于 这 种 新 材 料, 高 光 功 率(HOP) 象,相机俯瞰环形的中心。这种技术
景之间形成更高的对比度。 SWIR 光源的开发获得了新进展,其 适用于照明漫反射、非反射型的待检
红外成像比较适合食品包装的 发出的 SWIR 光的光照强度比其他同 测目标,如图 5 所示的案例中,就使
下转第29页
检测,能更加容易地读取条码和有效
期信息。例如,图 5 所示的酸奶杯盖
上套印的有效期信息是很难读取的。
940nm 波长的光照,可以被印制图像
的油墨很好地吸收,也可以被印制的
有效期文字的油墨很好地反射。因此,
利用 940nm 波长的照明,可以更容
易实现日期识别。此外,这个波长的
光照也可用于显示包装表面上的撕裂 图5:红外LED光源能使印刷在塑料盖上的文字不可见,从而使日期码的读取更加容易。

24 Dec 2020/ Jan 2021 视觉系统设计 Vision Systems Design China


2021

动荡与机会并存
如何把握制胜商机
工业 4.0、中国制造 2025、5G ……为制造业带来了发展机遇,中国制造业处于向上发展的历史大潮中;然而,
中美贸易摩擦影响持续蔓延,也为中国制造业带来了挑战。在这个机遇与挑战并存的关口,制造企业该从何处着手谋
求长远发展?如何通过部署先进制造技术快速实现转型升级、让自身在市场竞争环境中拥有 “硬本领” ?激光,作为
一种先进的加工工具,随着自身技术的不断提升和市场需求的发展,已经在制造业的发展中挥发着举足轻重的作用。
 
那么,最近激光在技术方面有哪些新的进展?这些新发展又将如何应用到制造业中、能为制造业带来哪些好处?
为了让制造企业及时了解先进的激光加工技术、让激光技术厂商及时了解市场需求,由雅时国际商讯旗下的《激光世
界》杂志举办的 LaserFocusCon 激光研讨会,将于 2021 年再次走进苏州,为制造企业和激光技术供应商,搭建面对
面交流探讨的平台。

大会主题(拟定) 往届听众分析 主办单位

• 激光精密加工与运动控制 应用研发
主管/总裁/副理/负责人
• 皮秒及飞秒激光的工业应用
工程人员(包括项目理)
• 高功率半导体激光器技术发展及应用 制造/生产工艺设计
工程管理
• 蓝光 / 绿光在高反金属加工中的应用
技术支持/服务 大会媒体
• 激光金属增材制造技术及应用 基础研究
• CO2 激光器的新应用机会 封装/装配
工程设计(器件/系统/子系统)
• 激光精密焊接与实时质量监控技术 教育/培训
• 新基建、智能制造为激光技术带来的新机遇 销售/市场

会议规模 会议咨询

时间地点:苏州 · 2021年6月 如有问题,可添加 “小镭助手”


目标人数:200-220名技术和管理人员 微信号“LFC-RA”进行咨询

小镭助手微信
应用与解决方案 Applications & Solutions

光源控制

线阵分时成像系统的特点及应用
线阵分时成像技术可以解决外观缺陷难以检测的问题,并能节省设备工位、降低算
法难度,大幅提升检测效率,简化检测任务。

文/沃德普自动化

多工位检测
外观缺陷检测的难点 各自特征,使用不同外 多工位检测
产品外观缺陷会直接影响产品质 形、角度、光谱的光源,
量,检测时,由于产品缺陷种类繁多 才能更好地凸显图像特
且干扰因素众多,导致外观检测一直 征。 例 如, 手 机 玻 璃 盖
是机器视觉检测中的难点,主要原因 板检测表面凹凸点、脏
如下 : 污缺陷、表面划伤缺陷,
• 外观检测多样化和非标化 :对光 常规方案需要不同光源、
源、控制器等硬件要求和配合变 多个工位,采用多组相
得复杂。 机镜头及工控设备检测 ;
• 对算法要求高 :图像一致性、缺 庞大的设备检测线,导
陷方向、背景干扰大等问题,也 致对设备的空间要求大、
很难掌握。 成 本 高。 图 1 为 产 品 外
• 过多检测工序 :一方面,设备检测 观检测多工位示意图。
图1:多工位检测示意图。
工序变复杂且成本变高;
另一方面, 沃德普的分时成像
设备厂商对设备空间要求高。 技术,分为单线分时成像技术和“盘 和检测成本方面,都有着巨大优势。
沃德普致力于解决客户成像难 古”成像技术,其特点为 :可将多个 目前,分时成像技术主要应用于
点,盘古成像系统不仅能减少设备空 工位整合为一个工位,并且在一部相 3C、PCB、锂电、印刷、布匹、膜材
间、节省成本,还能大幅提升检测效率。 机下,呈现出多幅特征鲜明的图像。 等行业检测中。
无需考虑因产品位置不一样,导致需
分时成像技术 要重新定位标定等问题。对于多类型 单线分时成像技术
对于不同的检测要求,需要针对 产品检测,其在运算速度、设备空间 (1)单线分时成像技术工作流程

图2:分时成像技术示意图。 图3:三个光源分时成像示意图。

26 Dec 2020/ Jan 2021 视觉系统设计 Vision Systems Design China


应用与解决方案 Applications & Solutions

由编码器给出信号,高速恒流逻 保证图像不会丢失。 信号,相机接收信号后给出循环的 2-4


辑控制器接收到信号后,给光源控制 单线分时技术用于卷料检测,膜 组信号,使光源控制器支持高速频闪
器和单线线扫相机,高速且循环逐次 材外观检测,布匹、LCD、OLED 大 切换光源的亮灭,在相机端同步对图
地 切 换 输 出 1-4 组 信 号,PC 端 处 理 屏外观检测,以及印刷行业检测等。 像进行拆分,同时实时给出几幅独立
软件对相机采集的不同信号对应的不 (3) 高 速 恒 流 逻 辑 控 制 器 图像。
同图像,进行抽取和拼接,最后形成 PHCL 系列 (2)盘古分时成像技术的特点
对应光源对应的不同图像。 为了匹配分时频闪系统,要求光 • 可 以 支 持 1-4 种 光 源 同 时 检 测,
原图 放大图 源控制器能快速响应切换速度,防止 简化应用系统结构,大幅降低系
出现前面光源还未关断,后面光源就 统成本。
亮起,或匹配不上行频的情况发生, • 采用 TDI 技术,4 线每盏灯,共
导致图像失去真实性。 16 线,响应好,可在高行频下确
保清晰的成像。
图4:明暗相间的像素。 • 控制时序直接由相机完成,控制
以三个光源分时成像为例,分别 精度高,图像稳定。
为一个明场和两个暗场的照明方式。 • 可实时呈现拼接好的图像,无需
将图像放大,如图 4 所示,会看出明 PC 端算法再进行抽取和拼接,效
暗相间的像素,即 1、4、7 行为明像 图6:高速恒流控制器PHCL系列。 率高,可靠性好。
素,2、5、8 行,3、6、9 行为暗像素, PHCL 系列控制器(见图 6),可 • 速度快,最高可响应 50kHz 的触
依此类推。通过软件分别对这三个光 用于单线分时频闪系统中,控制器集 发频率,触发延时 <1μs。
源对应的图像进行抽取,再进行拼接, 成了三种逻辑输出功能,可以控制相 同样盘古也有它的不足,在于现
最终得出图 5 的三幅独立的图像。 机与光源高速切换采图。该控制器采 阶段相机支持 8K 分辨率,无法满足
光源 1 光源 2 光源 3 用恒流控制模式,响应时间 <1μs,单 所有应用需求。沃德普明年即将推出
路支持 5A 电流输出,总功率 600W, 16K 分时、彩色分时成像技术,可覆
频闪发光时间可精确至 1μs 调节,可 盖大幅面检测、印刷测、PCB 检测等。
满足不同应用场景需求。 (3)盘古分时成像技术应用
图5:三幅独立的图像。 目前盘古分时频闪方案,由于采
(2)单线分时成像技术特性 “盘古”分时成像技术 用 TDI 技术,相机感光更好,已成功
• 品牌多样化 :支持多种相机品牌, (1)盘古分时成像技术工作流程 应用在 3C 笔记本键盘外观检测、玻
单线线扫相机即可。 区别于单线分时检测方式,盘古 璃盖板外观检测以及锂电外观检测
• 分 辨 率 多 样 化 :支 持 常 见 分时频闪检测流程为 :由编码器给出 中。镜面材质物体暗场照明及产品高
2K/4K/8K/16K/32K 检 测, 满 足
不同场景应用需求。
• 通道多样化 :最多支持 6 路光源
进行高速分时切换,可根据不同
应用需求布置光源。
其缺点是 :由于使用单线线扫相
机,在高速检测时,对光源亮度要求
较高。系统时序控制由光源控制器实
现,需要对采集的图像进行抽取和重
新拼接,但需要各自算法足够稳定, 图7:盘古分时方案应用于手机玻璃盖板检测中。

视觉系统设计 Vision Systems Design China Dec 2020/ Jan 2021 27


应用与解决方案 Applications & Solutions

低背景亮度来提升缺陷的对比度。图
10 为交叉线形光源照明光斑与工作距
离关系示意图。
光 源( 推 荐 ) 工 作 距 离 为
50~150mm。表 1 为交叉线形光源推
荐工作距离的理论有效范围与实际有
效范围关系图。
表1:距离关系

分别检测锂电池极片和极耳(露铜、折痕) 同时检测锂电池极片和极耳(露铜、折痕)
图8:锂电池极片检测。 手机等移动电子产品的玻璃盖
速检测,相机无法很好地接收光线, 板表面缺陷检测,是当下机器视觉的
因此对相机感光、镜头通光量、光源 热点应用,也是难点应用之一。针对
亮度都有较高要求,这种情况可以选 玻璃盖板表面划痕检测,分别使用普
用“盘古”成像方案。 通线形光源和交叉线形光源进行检测
图 7 为盘古分时方案应用在手机 (光源架设方向与运动方向垂直),检
玻璃盖板检测中的案例。在一个工位 测结果对比如图 11 所示。
中加入四种不同的光源,实现盖板的 a) 普通线光检测横向划痕 b) 普
凹凸点、各个方向的划痕、崩边以及 通线光检测纵向划痕 c) 交叉线光检
孔内异物等缺陷检测。 测纵向划痕
图 8 为锂电池极片检测示例。由 从图 11 中可以看出,使用普通
于锂电池极片和极耳反光度不同,需 图10:交叉线形光源的照明光斑与工作距离关系示 线光源检测“横向划痕”时缺陷可见;
意图。
要采用两个不同光源进行分时频闪成
像。锂电池检测对效率要求极高,在
高速运动下,对于光源亮度、镜头通
光量以及相机感光能力要求都变大,
“盘古”成像方案不失为一种理想选
择。
a)普通线光检测横向划痕 b)普通线光检测纵向划痕 c)交叉线光检测纵向划痕
图11:玻璃盖板上的划痕检测。
线阵特色光源
高质量成像离不开好平台和光源 (1)交叉线形光源
支撑,沃德普自动化推出了多款针对 以产品划伤检测为例,横向划伤
缺陷检测的照明成像方案。 检测效果远高于纵向划伤,因为常规
光源光线仅从一个角度返回相机。为
了让纵向缺陷无处遁逃,沃德普推出
了交叉线形光源,它利用特殊光学设
计,使两侧光线呈一定角度汇集到光
图9:交叉线形光源 LNC系列。 源中间位置,凸显纵向缺陷,通过降 图12:超高亮线形光源。

28 Dec 2020/ Jan 2021 视觉系统设计 Vision Systems Design China


应用与解决方案 Applications & Solutions

图13:光源照度与工作距离关系图。

图14:平行同轴线形光源。

材凹凸点、折痕、变形等缺陷检测,
采用平行光路设计,使特征明暗交界
分明,更利于提取产品特征。
可 用 于 检 测 LCD 基 板 凹 凸 点、
PCB 裸板外观缺陷、手机偏光膜材凹
图15:缺陷成像局部图。 凸点及压痕检测等。
使用普通线光源检测“纵向划痕”时 随之提高,超高亮线形光源专用于高
缺陷不可见;使用交叉线光源检测“纵 速检测。它的表面照明可达 300wlx, 总结
向划痕”时缺陷可见。因此,在实际 支持较远工作距离下的照明。也可搭 分时频闪技术可分为单线分时成
检测过程中,将普通线光源和交叉线 配在分时频闪系统中,用于检测玻璃 像技术和盘古分时成像技术。单线分
光源配合分时成像方案使用,可以很 盖板外观缺陷、印刷字符缺陷、车底 时成像方案在多样化上具有优势 ;而
好地检出玻璃盖板上横竖划痕。这种 部件缺陷等检测中。 在速度和效率要求较高的场合,盘古
方法可用于检测玻璃盖板、薄膜、金 光 源 推 荐 工 作 距 离 50~200mm, 分时成像方案则更具优势。两种分时
属面等产品上的划痕和条纹等缺陷。 应对不同工作距离下的超高亮照明使 技术都可以解决外观缺陷难以检测的
用。图 13 为两款超高亮线形光源的 问题,并能节省设备工位、降低算法
(2)超高亮线形光源 光源照度与工作距离关系图。 难度,大幅提升检测效率,使得检测
在检测时,为了提升检测效率, (3)平行同轴线形光源 化繁为简,提升性价比。
提高运动速度,对光源的亮度要求也 平行同轴光源用于平面产品,膜

上接第24页

用了红外 LED 环形光源。低角度的 光源的一项重要指标。耐蒸汽的 IP69 的智能照明解决方案 Fastus 系统,具


LED 环形光源,允许将光源安装在距 防护等级的光源外壳,可以耐受高温、 有先进的控制功能,可以补偿“由于
离被检测目标更近的位置,这样可实 高压液体冲洗要求。IP65 和 IP67 防 LED 随时间而自然老化、或诸如温度
现突出表面特征的暗场照明。相机只 护等级的外壳,可以耐受其他冲洗系 或周边光照等外部环境变化”等引起
接收来自缺陷散射的光。 统。 的光照强度衰减。另外,智能照明解
LED 光源对工作环境的耐受性同 光源质量的稳定性,在食品和饮 决方案还可以对设备维护数据和光照
样重要。在食品和饮料检测中,有时 料检测中同样至关重要,因为光照条 质量的一致性进行登记和记录,满足
由于无菌或清洁环境的需要,LED 光 件的变化可能导致不合格品通过检测 FDA(美国食品药物管理局)对数据
源在工作环境中的耐受性,也是选择 (误检)或检测失败。CCS 公司提供 跟踪的要求。

视觉系统设计 Vision Systems Design China Dec 2020/ Jan 2021 29


应用与解决方案 Applications & Solutions

箱柜拣选

优化的机器人路径规划和多件拣选功能,
实现每分钟 60 个部件的箱柜拣选速度
自动校准、一键式设置和扫描示教功能,确保快速部署。

文/ISRA VISION

采用光学传感器辅助进行随机箱柜拣选已成为自动化 以在不到 0.5s 的时间内完成扫描。


作业的终极法则。ISRA VISION 成熟可靠的箱柜拣选传感器 为确保全方位检测组件,该传感器采用了四摄像头技
的增强版本,能够以极快速度实现更优的结果。该解决方 术,四个摄像头可以从多个角度扫描箱柜中的物品。传感
案不仅采用强大的四摄像头技术和嵌入式系统架构,而且 器捕获的多视点图像能够确保物体检测的可靠性,精确生
重点引入了优化的机器人路径规划和可靠的多件拣选功能。 成点云,即使组件上有阴影和反光也不影响。其智能系统
作为 Touch & Automate 系统的一部分,该产品适用于所有 可将结果与先前上传或扫描的 CAD 模型进行比较,随后
主要品牌机器人,并且可以在数小时内部署到生产环境中。 检测要拣选的组件,并自动创建优化的拣选顺序和路径规
随着成本压力日益加重且质量要求日益苛刻,制造业 划。此外,可靠的无碰撞机器人路径计算,可确保在极短
需要极其高效的自动化解决方案。ISRA VISION 开发的 的周期时间内快速可靠地完成操作。
PowerPICK3D 传感器成熟可靠,能够准确识别不同形状
和材质的部件,堪称箱柜拣选的首选。该传感器采用智能 可靠的多应用自动化解决方案
化设计,带有嵌入式 PC,无需多余的接线即可连接到摄 作为增强型箱柜拣选传感器,PowerPICK3D 将侧重点
像头和 PC。如此便能加快数据传输和处理速度,进而可 放在了工艺稳定性和速度上。
因此,
通过连续的3D箱柜检测,
该传感器能够在每次扫描后捕获完整的箱柜图像。该传感
器新集成了多件拣选功能,可以屏蔽先前移走部件的区域,
确保只需单次扫描便能准确拣选多个部件。同时,该传感
器也针对有缺陷的部件采取了实用的处理方案 :如果在扫
描过程中识别到未知组件,则会采用警报形式通知操作员,
同时生产流程会继续,从而避免成本高昂的停工事件。

图1:自动路径规划:无碰撞路径规划,确保实现极高的工艺可靠性。 图2:一键式机器人界面,可以在10分钟内完成标准化的箱柜拣选设置。

30 Dec 2020/ Jan 2021 视觉系统设计 Vision Systems Design China


应用与解决方案 Applications & Solutions

此外,工厂也可
利用该产品从材料供
应方面避免停工 :借
助模块化和可扩展的
多传感器布局,工厂
可以采用两个传感器
连 续 扫 描 两 个 箱 柜。
因此,只需一个机器
人便可清空两个箱
图3:Touch & Automate:全新用户体验,可通过手持设备设置和控制传感器。
柜。第一个箱柜清空
后,继续对第二个箱
柜进行拣选,如此便
能避免生产过程的不
必要中断。该产品支
持 复 杂 的 夹 持 位 置,
进一步强化了其关键
的箱柜拣选性能。优
化的拣选策略结合夹
持 器 的 第 七 轴 功 能,
确保更容易拾取角落
位置的部件,进而实
现最大程度地清空箱
柜。总之,这些新型 图4:箱柜拣选解决方案的3D机器人指导,确保实现最佳性能和最高灵活性。

增强功能的组合(每分钟 60 个循环) 界面一键完成设置,即可确保无缝安


为箱柜拣选设定了新基准。 装到所有主要品牌的机器人。传感器
ISRA VISION 提供各式各样的传 和机器人自动校准,使得设置过程也
感器,并且具备丰富的专业知识,可 更加快速简便。该产品的一项特别创
以为每个应用领域提供合适的解决方 新便是其组件检测功能,可以针对新
案。 其 产 品 设 计 灵 活, 能 够 适 应 复 部件提供简单的扫描示教过程。
杂的系统和生产线,满足客户的各
类需求。该系列专业传感器提供了 适应互联式生产
组件检测的出色“视野”,不受箱柜 ISRA VISION 的箱柜拣选解决方
尺寸或部件位置影响。总体而言,与 案,可以说是市面上最完整的箱柜拣
同类传感器解决方案相比,增强型 选产品组合,能够兼容所有主要品牌
PowerPICK3D 可大幅提高处理能力, 的机器人和标准通信接口。这些传感
并且加快周期时间。 器标配 WLAN,并且每个设备都可使
用 OPC UA 通信协议进行远程访问。
一键快速部署 凭借直观的应用程序设计和多种数字
此 外,PowerPICK3D 传 感 器 解 网络功能,该产品组合能够切实满足
决方案非常容易安装 :只需从机器人 未来智能工厂的工业生产需求。

视觉系统设计 Vision Systems Design China Dec 2020/ Jan 2021 31


产品特写 Featured Product

远心镜头

远心镜头紧跟图像传感器的发展步伐
随着传感器变得越来越大,分辨率越来越高,选择合适的镜头对机器视觉系统的成功至关重要。

文/James Carroll

通过始终提供一个恒定的、无角 Opto Engineering 公 司 的


度的视野,远心镜头为“要求精密、 TC12M 镜 头( 见 图 1) 适 用 于 像 圈
可重复测量或检测的机器视觉应用”, 高达 33.5mm 的大型图像传感器,如
提供了所有镜头类型的最高精确度。 APS-H 格式的传感器。F-Mount 镜头
远心镜头制造商继续推进这项技术, 的 工 作 距 离 为 42.3~542.8mm, 放 大
图1:O p t o E n g i n e e r i n g公司的 F-Mount
他们纷纷发布了为最新的大幅面图像 倍率从 0.115X 到 1.825X。 TC12M镜头,适合APS-H格式的图像传感器,工
作距离长达542.8mm,放大倍率高达1.825X。
传感器量身定制的新镜头。本文将介 在 Opto Engineering 公 司 的
绍这一领域的一些最新进展。 360°OPTICS 系列镜头中,TCCAGE 81.8mm(1X)。
为了满足日益增长的高分辨率 双远心 C-Mount 镜头可在零件上实现 “Kowa 的 LM1119TC 是 一 款 独
应 用 需 求,Opto Engineering 公 司 发 360°远心视角,匹配的传感器尺寸 特的远心镜头,因为它是一个 4/3 英
布了专为 1200 万像素以上的图像传 有 1.1 英寸和 4/3 英寸,可以检测高 寸的大幅面远心镜头,设计了可变的
感器而设计的远心镜头。其中包括 达 8mm 和 16mm 的零件。此外,该 放大倍率,所以不同于需要关闭后方
TC3MHR-5MHR CORE PLUS 系 列 公 司 的 TC Core Plus(TCCP) 系 列 光学部件的远心镜头,这款镜头可以
大视场镜头,其可以匹配 1.1 英寸的 C-Mount 镜 头, 能 匹 配 最 新 的 1/1.8 通 过 旋 转 镜 筒, 在 0.5X~1X 之 间 调
图 像 传 感 器, 如 Sony 的 1230 万 像 英寸和 2/3 英寸 CMOS 图像传感器, 节 放 大 倍 率。
”Kowa 公 司 销 售 经 理
素 IMX304 ;也可以匹配 4/3 英寸的 提 供 217.4~366mm 的 工 作 距 离, 放 Andrew Kam 介绍说,
“LM1119TC 远
图 像 传 感 器, 安 森 大倍率从 0.027X 到 0.059X。 心 镜 头 的 分 辨 率 为 120lp/mm, 适 用
美半导体的 KAC- 同 样 为 1200 万 像 素 图 于需要快速执行可重复、高精度测量
12040。 该 系 列 远 像 传 感 器 而 设 计,Computar 的应用,如表面缺陷和图像缺陷的检
心镜头设计用于在 公 司 的 TEC-V035165MPY- 查。

缩小的空间内测量 WI 系列远心镜头(见图 2)是 VS Technology 公司提供多种远
大型物体,能提供大 特 别 针 对 Sony 的 1200 万 像 素 心镜头系列,其中 VS-TLS 系列(见
约 144~260mm 的 视 IMX253 CMOS 图 像 传 感 器( 像 图 4)支持高达 1200 万像素的 1.1 英
野,放大倍率从 0.053X 素 尺 寸 3.45μm) 而 设 计 的。 镜 寸图像传感器。VS-TLS 系列有六种
到 0.117X, 并 提 供 头采用 C-Mount 安装,工作距离 型 号, 工 作 距 离 300~500mm, 并 可
C-Mount 或 F-Mount 安装 为 165.2mm,放大倍率为 0.345X。 以重新配置不同的后方单位,以在
选项。 Kowa American 公 司 的 4/3 英 寸 0.029X 到 0.1X 之间改变放大倍率。
LM1119TC C-Mount 镜 头( 见 图 3), VS Technology 公 司 的 VS-THV
图2:C o m p u t a r公司的T E C-
V035165MPY-WI系列镜头,适用 能够匹配高达 2100 万像素的图像传 系列远心镜头专为 1.1 英寸图像传感
于1200万像素的图像传感器,具有
165.2mm的工作距离和0.345X的放
感器,能提供 0.5X 到 1X 的放大倍 器(像素尺寸 3.45μm)而优化,提
大倍率。 率, 工 作 距 离 为 80mm(0.5X) 和 供 0.5X、0.8X、1X、1.5X、2X 和 3X

32 Dec 2020/ Jan 2021 视觉系统设计 Vision Systems Design China


Featured Product 产品特写

放大选项,以及可选的内 图3:Kowa公司的4/3英寸 为 111~182mm, 放 大 倍 率 0.28X 至


L M1119T C镜头,适用于
置 同 轴 照 明。VS-THV 系 2100万像素的图像传感器。 1.7X。
列采用 C-Mount 接口,工 通过旋转镜筒,可以实现 “兼容柯达(安森美半导体)的
0.5X~1X的放大倍率。
作距离为 80~152mm。 400 万 像 素 1.3 英 寸 图 像 传 感 器 和
VS Technology 公 司 Yuji Sugahara 介 绍 其 他 更 大 尺 寸 的 传 感 器, 如 7µm
的 VS-TEV 系列远心镜头, “VS Technology
说: 像 素、4K 线 扫 相 机,TECHSPEC
支 持 1.1 英 寸、 像 素 尺 寸 的远心镜头具有广 PlatinumTL 镜 头 能 够 实 现 无 与 伦 比
3.45μm 的图像传感器,提 泛的光学放大倍率 的 72lp/mm 的成像对比度。”Edmund
供 三 个 可 变 放 大 范 围, 分 和工作距离,能够满 Optics 公司首席技术营销工程师 Cory
别 为 :0.3X 至 0.5X、0.5X 至 足各种机器视觉应用需 Boone 说,“这将实现最高的图像质
0.75X 和 0.75X 至 1X。 该 系 列 采 求。它们能够匹配多种尺寸 量和最高的测量精度。”
用 C-Mount 接 口, 工 作 距 离 分 别 为 的图像传感器,甚至是大型传感器和 Sill Optics 公司为更大格式的图
125.8~221.5mm、133.9~173.2mm 和 高分辨率相机,并采用无失真设计。 像 传 感 器 提 供 远 心 镜 头( 见 图 6),
114~133.9mm。 此外,我们还提供定制生产和 OEM 包 括 52mm、56mm、70mm 和 82mm
VS Technology 公 司 VS-TCM 支持。” 的 图 像 传 感 器。 提 供 M72×0.75 和
系 列 大 幅 面 镜 头 支 持 1.1 英 寸 图 像 Edmund Optics(EO)公司为 M90×1 的 安 装 接 口, 工
传 感 器, 提 供 0.3X 至 7X 的 放 大 倍 更大尺寸的图像传感器提供了 作 距 离 为 114mm、
率 ;采 用 C-Mount 接 口, 工 作 距 离 两个系列的远心镜头,其中 142mm 和
50.4~150.8mm。 一 个 为 TECHSPEC TitanTL 180mm,
此 外,VS Technology 公 司 还 在 系 列( 见 图 5), 它 们 支 持
今年 9 月份推出了专门针对短波红外 1/1.8 英 寸、2/3 英 寸、1 英
(SWIR) 成 像 的 远 心 镜 头 VS-THV- 寸、4/3 英 寸 和 35mm 的
SWIR 系列,支持 1.1 英寸和 1 英寸 图 像 传 感 器 格 式。 镜 头 有
的图像传感器,放大倍率有 1X、1.5X、 C-Mount、M42×1.0、F-Mount
2X、3X 和 4X。这些镜头适用于波长 和 M58×0.75 的 接 口 选 项, 支 持
图4:VS Technology公司的VS-TLS系列远心镜
1000~1600nm 范围内的成像应用,工 110~379mm 的工作距离,支持 0.037X 头,支持高达1200万像素的图像传感器,工作距离
作距离分别为 110.4mm、111.1mm 和 至 0.337X 的放大选项。 300~500mm,放大倍率0.029X至0.1X。

111.2mm。 Edmund Optics 公 司 的 放 大 倍 率 0.65X 至 1.5X。 该 公 司 还


VS Technology 公 司 市 场 总 监 TECHSPEC PlatinumTL 远 心 镜 头 支 专 门 为 1200~2400 万 像 素 的 图 像 传
持 2/3 英 寸、1 英 寸、 感 器 提 供 镜 头, 如 Sony 的 IMX387
1.1 英寸和 APS-C 格式 或 IMX530 CMOS 图 像 传 感 器 ;这
的 图 像 传 感 器, 提 供 些镜头提供 C-Mount、M35×0.75 和
C-Mount、F-Mount 和 M42×1 安装接口选项,工作距离为
M42×1.0 的 安 装 接 口 180mm、284mm 和 300mm, 放 大 倍
选项。镜头的工作距离 率 0.13X 至 0.3X 可选。
该 公 司 的 S5LPJ1750 和
图5:E d m u n d O p t i c s公司的
T E C H S P E C Ti t a n T L远心镜 S5LPJ6150 C-Mount 镜头,支持典型
头,支持1/1.8英寸、2/3英
寸、1英寸、4/3英寸和35m m 的 1.1 英寸、3.45µm 图像传感器,如
的图像传感器格式,工作距离 Sony 的 IMX304 和 IMX253,工作距
110~379mm,放大倍率0.037X
至0.337X。 离分别为 284mm 和 180mm,放大倍

视觉系统设计 Vision Systems Design China Dec 2020/ Jan 2021 33


产品特写 Featured Product

率分别为 0.166X 和 0.244X。 1.3X 的 放 大 倍 率。SPO 公 司 的 图6:S i l l O p t i c s


公司为更大格式的图
奥普特也提供远心镜头产品,其 DTCL-29M 系 列 镜 头, 采 像传感器提供远心镜头,
中 OPT-CZT0510X 镜 头 提 供 0.5X 至 用 M58 接 口, 适 用 包括尺寸高达82mm的图像
传感器。
1X 的放大倍率,采用 C-Mount 安装 于 43mm 或 2900
接口,适用于 1/1.2 英寸图像传感器, 万 像 素 的 图 像 传 角线尺寸达 18mm(1.1 英
工作距离为 108mm。该公司的 KS 系 感 器, 工 作 距 离 寸 )、 像 素 尺 寸 3.45μm 或
列远心镜头,适用于 1.1 英寸图像传 160~545mm, 放 大 更大的图像传感器。这些远心镜
感器,采用 C-Mount 安装接口,工作 倍 率 0.15X 至 0.664X。 头采用 C-Mount 接口,工作距离分
距 离 110~220mm。 还 有, 该 公 司 的 TCL-25M 系列镜头匹配 2500 别 为 65mm、110mm 和 130mm, 放
TS 系列双远心透镜兼容 1/2.5 英寸到 万像素或 32mm 的图像传感器,提供 大倍率可达 2X。MML-HR 大幅面系
59mm 的相机,工作距离 73~410mm。 78~347mm 的 工 作 距 离 和 0.153X 至 列镜头(见图 7),支持对角线尺寸
VICO 公司的 DTCM 系列远心镜 3X 的放大倍率选项。SPO 公司还提 ≥35mm、像素尺寸为 4μm 或更大的
头,专为 4/3 英寸 /35mm 图像传感器 供其他远心镜头,包括适合 1.1 英寸 2900 万像素图像传感器,工作距离
而优化,采用 F/M-Mount 安装接口, 图像传感器的 TCL-12M 系列 C-Mount 109~220mm, 放 大 倍 率 可 高 达 3X。
工作距离 73~465mm,放大倍率 0.08X 镜 头, 工 作 距 离 110~310mm, 放 大 此外,该公司的 MML-SR 镜头还可
至 1.115X。DTCM 系 列 的 C-Mount 倍 率 0.318X 至 0.785X ;TCL-16K 系 以定制为适合 4/3 英寸或更大的图像
接口镜头,专为 1.1 英寸图像传感器 列适用于 16K 线扫相机,工作距离为 传感器,适合 2.7~3.45μm 或更大的
而优化,工作距离 73~465mm,放大 130mm、148mm 和 170 mm,放大倍 像素尺寸。
倍率 0.024X 至 0.708X。 率 0.415X 至 2X。 “利用我们 30 多年来设计和组装
此外,VICO 公司还提供物方远 Moritex 公 司 于 1989 年 首 次 推 远心镜头的专业知识,Moritex 为客
心镜头,如 WWK C-Mount 系列,可 出远心镜头,是最早为机器视觉提 户提供了所需要的性能和可重复性,
支持 1.1 英寸、1200 万像素的相机, 供远心镜头的公司之一。在其 MTL 帮助客户实现先进制造所需的对准、
工 作 距 离 110~220mm, 放 大 倍 率 系列产品中,有针对 1.1 英寸图像传 检查和计量应用中,使用最高分辨率
0.14X 至 3X。 感器提供的双远心镜头,工作距离 的相机产品。”Moritex 北美公司总裁
韩国 SPO 公司的 TCL-47M 系列 120~540mm,兼容像素尺寸 3.45μm Jason Baechler 说。
镜头,采用 M72 接口,适用于 4700 的图像传感器。在这个可配置系列镜 Excelitas 公 司 的 mag.x 125 双 远
万像素或 56.7mm 的图像传感器,提 头中的后透镜组件,可以更改以满足 心镜头系统,能够支持尺寸达 57mm
供 105~542mm 的工作距离和 0.2X 至 相机图像格式,适用于对角线尺寸从 的现代图像传感器。该公司的模块
<11mm 到 92mm 的 图 像 传 感 器, 在 化镜头系统主要为高分辨率检测应用
35~350mm 的工作距离内,不会对 而 设 计, 通 过 3 个 管 状 镜 头 选 项 和
FOV 有任何性能影响。 3 个 工 作 距 离 分 别 为 13mm、23mm
Moritex 公 司 的 MML 系 列 物 和 24.8 mm 的不同物镜,提供 2X 至
方远心镜头,在镜头长度和直径的 18X 的系统放大倍率。
设计上,针对不同的图像传感器格 尽管远心镜头并不是一项新技
式和尺寸进行了优化。MML-SR- 术,但是它仍在不断适应机器视觉系
18C 镜 头 专 为 Sony 的 IMX 系 统集成商和终端用户在测量、缺陷和
列图像传感器设计,适合对 边缘检测等应用中不断增长和变化的
需求。本文中所介绍的远心镜头,适
图7:Moritex公司提供许多远心镜
头产品,包括适用于2900万像素
合使用大幅面、高分辨率图像传感器
图像传感器的型号。 的相机。

34 Dec 2020/ Jan 2021 视觉系统设计 Vision Systems Design China


Interviews 访谈

聚焦技术革新、客户需求与前瞻性布局,
驶入 CMOS 图像传感器发展的高速通道
—— 访思特威首席运营官马伟剑先生

随着人们的生产生活越来越智能化,成像技术已经渗 界领先的夜视全彩技术,应用
透到了广泛的领域,从视频监控到自动驾驶,从人脸识别 到 车 载 电 子、ITS 以 及 手 机 等
到工业机器视觉,成像几乎已经无处不在。随着这些应用 更多领域 ;将之前仅在高端手
要求的不断提升,它们对成像技术的核心器件——图像传 机 CIS 中才会使用的 FBDTI 和
感器的性能要求也越来越严苛,这无疑为图像传感器芯片 LNG 技术与新工艺结合,首次
厂商提出了全新的挑战。 在安防应用领域实现了 RGBW
思 特 威(Smartsens) 作 为 国 内 一 家 致 力 于 高 性 能 & RGBIR 技术。 思特威首席运营官马伟剑先生

CMOS 图像传感器(CIS)芯片设计的公司,自 2011 年成 其次是立足于客户需求,打造有竞争力的差异化产


立以来,一直致力于开发性能领先的 CIS 芯片,以应对不 品。现在,客户分布的行业领域越来越多,应用要求也有
断增长且快速变化的市场需求。 着各自的独特之处。思特威看到了市场对差异化的需求,
坚持以客户需求为基点,打造更契合客户应用特点的差异
十年磨一剑 化产品。正是这一点,让思特威在同质化竞争中脱颖而出,
经历了近十年的耕耘发展,思特威已经成长为 CIS 赢得了客户的认可和青睐。
领域一匹快速奔跑的黑马,其产品遍布安防监控、车载影 最后是前瞻性布局。思特威一直坚持“研发一代、量
像、消费电子(无人机、扫地机器人、家用摄像头等)及 产一代、预研一代”的产品开发理念,并始终以前瞻性的
机器视觉等多个领域。从 2017 年起,思特威的 CIS 产品 眼光去洞察市场变化趋势,与客户日益提升的需求保持同
已经连续几年在全球安防市场占有率第一,2020 年在消 步,甚至超前。正是基于这种市场导向的前瞻性眼光,思
费级机器视觉领域全球市场出货量第一,并在机器视觉、 特威早在 2017 年就开始布局以“消费级机器视觉”为重点
人工智能等市场不但开疆拓土。 市场的全局快门技术及产品,并在今年获得了“丰收”
,成
随着市场的拓展,思特威的 CIS 芯片年度出货量也 为了该领域全局快门图像传感器出货量全球第一的企业。
迅猛飙升,2019 年的出货量为 1 亿颗,2020 年销量翻番,
超过 2 亿颗,预计 2021 年仍将翻倍增长! 工业市场的机会与挑战
作为一家芯片公司,能在不到十年的时间内获得如 作为最早启动智能化和自动化转型的行业之一,工业
此快速的发展,思特威首席运营官马伟剑先生道出了背后 机器视觉的智能化进阶已势不可挡,这无疑为图像传感器
“快速发展主要得益于思特威在三个方面的聚焦, 打开了又一个巨大的应用市场。
的关键 :
即 CIS 的技术革新、聚焦客户需求和前瞻性布局。” 机会与挑战同期而至。图像传感器是工业机器视觉的
核心之眼,机器需要基于图像传感器生成的影像进行识别
聚焦三点 和运算,来决定下一步的“行动”。让机器“看图像”,对
首先是聚焦 CIS 的技术革新。在 CIS 技术革新方面, 图像传感器提出了更高的成像要求,主要体现在高清晰度、
思特威有两大特点,一是“快”,思特威始终保持着高效 不变形 & 无伪影(可识别)、高帧率、高快门效率这几方面。
的技术革新速度,技术和产品基本上是半年升级,一年 生产效率的提升,使得传统的卷帘式快门图像传感器
迭代 ;二是“技术延展”,依靠思特威自身优势技术的延 已经很难适应自动化流水线作业,成像容易产生畸变和运
展,赋能更多应用领域的客户需求。例如,思特威将在业 动伪影等问题。思特威的 SmartGS® 系列全局快门图像传

视觉系统设计 Vision Systems Design China Dec 2020/ Jan 2021 35


访谈 Interviews

感器,能为图像的识别及运算提供无形变、无运动伪影的 优秀的产品背后是强大的技术支持。思特威在 2018


®
清晰影像。此外,SmartGS 系列图像传感器通过将 BSI 发布基于 BSI 的全局快门技术的基础上,再度率先着手研
像素设计与 GS 技术的创新结合,可提供感度更佳、清晰 发了其 2nd Gen SmartGS® Technology ,通过提升像素尺
度更高的成像品质,满足工业机器视觉日益向精细化筛检、 寸来增加感度和暗光效果,提升率可达 30% ;另一方面采
精密化制造发展的需求。 用并行电压域读取,大大提升了最大快门速度,完善对高
另外,高速生产运作还要求图像传感器拥有高帧率及 速运动物体的清晰抓拍。基于全新的电容工艺,2nd Gen
出色的快门效率,能在短时间内为后端运算提供更多可识 SmartGS® Technology 的读取噪声可降低一倍以上,同时
别的影像依据,从而提高整个工业机器视觉系统的反应速 兼具区域 HDR 技术,可大大提升特定位置的动态范围,
度,有效提升生产和检测效率。 完善夜间拍摄信号灯成像过曝等问题。

市场布局 未来发展
与安防市场的“人”看图像不同,机器视觉市场则更 目前大部分厂商的全局快门图像传感器仍然是以前照
多的是捕获优质图像信息给机器来“看”。思特威在 2018 式(FSI)工艺为主,而思特威在背照式(BSI)工艺结合全
年发布了业内首颗基于 BSI 像素工艺结合全局快门技术 局快门技术的产品上,已经在市场上占有很大优势。目前思
®
的 SmartGS 系列的首颗产品 SC031GS,随后又陆续推出 特威的产品已广泛应用于国内外一线无人机、智能扫码识别、
®
SC130GS 及 SC132GS, 搭 载 思 特 威 创 新 的 SmartGS 技 智能生物识别以及智能教育等机器视觉厂商的终端产品中。
术和 HDR 技术,已广泛应用于一线无人机、扫地机器人、 面向这些头部客户厂商,思特威不断进阶自身成像技术科技
翻译笔、人脸 / 生物识别门禁系统、扫脸支付等众多新兴 水平,站在客户的立场去思考产品的需求,并建立完整强大
智能影像应用和新消费类市场领域。思特威已实现全球消 的供应链支持系统,保障产能支持,真正让客户放心。
费级机器视觉领域出货量第一。 谈及接下来的发展,马伟剑先生表示,2021 年思特威
针 对 智 能 交 通 系 统(ITS), 思 特 威 2020 年 发 布 了 将在产品性能上实现更多突破,推出 SmartGS® 系列全性能
400 万像素的 SC410GS,后续还将推出分辨率达 900 万像 提升的进阶产品 SC035HGS。该产品同样采用思特威优势
素的 SC910GS。这两款产品均采用 BSI 像素工艺结合思 的 BSI 像素结合全局快门技术,并支持单帧 HDR,有效提
特威 2nd Gen SmartGS® 的领先技术,通过串行 GS Pixel 升其场景适用性。SC035HGS 还具有更出色的信噪比,大幅
有效提升噪声性能 ;而大尺寸 BSI 像素保障了其在低照度 改善的高温成像性能,助力模组小型化及量产品质的优化。
下的出色感光性能,可有效减少智能交通系统中爆闪灯的 SC035HGS 还将搭载思特威优势的 NIR 技术,相较于前代
光污染 ;为 ITS 系统下车牌 + 人脸识别应用量身定制的高 产品,其在近红外光下的成像性能可提升一倍。它将以更出
纵向分辨率结合区域 HDR 技术,可精准捕捉车道上快速 色的升级成像品质,赋能无人机、扫地机器人、生物 / 人脸
行驶的人车影像,成像无尾影、不形变,大幅提升智能交 识别终端、智能教育等诸多 AI 及消费级机器视觉应用终端。
通系统对车牌 / 人脸的识别度,并有效解决了夜晚拍摄交 此外,3rd Gen SmartGS® Technology 已在开发中,其
通信号灯过曝的问题。 在性能上比 2nd Gen 将有更大的进步。马伟剑先生预测,
在车载电子智能驾舱领域,思特威推出了面向驾驶 2021 年思特威在“消费级机器视觉”应用领域的出货量
员 监 测 系 统(DMS) 的 SC133GS, 其 采 用 2.7μm 像 素 有望保持倍数级增长。未来思特威会继续向更多机器视觉
及 1/4″光学尺寸,拥有业内顶尖的近红外光超高灵敏度, 细分市场渗透。
在 940nm 的量子效率达到 40%,确保 DMS 系统能在不可 未来的工业机器视觉市场势必会向着更加智能化、精细
见光范围内实现高清成像。专为 DMS 系统量身打造的 3:4 化以及高效化的方向发展,而这将催生更多的图像传感器用
竖幅画面,确保了以驾驶员作为主的像素覆盖主体,进一 到工业制造下的“慧眼机器人”终端上 ;并且由于向精细化
步提升以驾驶员为中心的影像清晰度。SC133GS 为 DMS 和高速生产化的演变,使其对图像传感器的成像性能提出更
系统进行及时精确的判断提供坚实的影像基础,有效监测 高的要求。这也将为未来图像传感器在工业机器视觉市场中,
驾驶员状态,保障行车安全。 (文 /Rossie)
在“量”与“质”上带来更广阔的发展空间。

36 Dec 2020/ Jan 2021 视觉系统设计 Vision Systems Design China


产品撷英 Products Highlights

自动对焦工业智能相机 检 测、 扫 描 走 停
苏州巨佳电子推出 BV 系列全集 式产线上目标物
成自动对焦工业智能相机。该系列相 和其他常见的工
机集成相机、处理器、镜头和光源于 业 自 动 化 应 用。
一体,并可选装基于液体镜头技术的 3520 能 与 机 器 人
自动对焦镜头。得益于这种高集成度, 轻 松 集 成, 可 支
该相机体积更小、成本更低,易于安 持不同扫描角度。3520 的高强度 LED 投影,意味着短曝
装、调试和维护。 光时间和快速扫描速率,可生成高质量的扫描数据,同时
该系列智能相机内嵌了常规的图像处理算法,包括定 将由扫描物振动或运动抖动引成的动态模糊降至最低。
位、读码、OCR、2D 测量、有无检测等,可满足大部分 G3520 无需外部控制器或电脑,内置 3D 检测软件,
基本视觉检测要求。传感器有多种分辨率选择 :130 万像 开箱即可进行测量,并与现有系统无缝集成。
素、200 万像素和 500 万像素。光源可选红、白、蓝、红 LMI Technologies,www.lmi3d.cn
外多种波长 LED;可选多种焦距镜头;八区独立控制;0°、
90°方向。相比传统智能相机和 PC 方案,BV 系列智能 PG-M4128-5G智能处理盒
相机为用户提供了一种更好的选择。 微视图像的 PG-M4128-5G 智能处理盒,是基于图像
苏州巨佳电子,www.gfocustech.com 压缩处理技术、AI 技术及 5G 通讯
技术自主研发的功能盒产品。主要
红外非球面透镜、红外镜头 功能是基于智能处理盒的高算力硬
福特科隆重推出红外系列产 件系统、AI 识别能力对工业相机采
品。可根据客户需求定制锗、硅、 集的图像数据进行智能压缩处理,
硫 系 玻 璃 等 红 外 材 料 透 镜。 可 提 并通过华为 5G 模组,将处理后的
供 直 径 Φ10mm~Φ200mm 内 规 格 数据通过 5G 网络向后端传输,轻
的产品。单点金刚石车削精度 :面 松将现有工业相机相关系统进行 5G 升级。
型 误 差 PV<0.5μm, 表 面 粗 超 度 采用 4 核 A53 高性能 ARM 处理器及 128 核 NVIDIA
RMS<5nm, 光 洁 度 :60/40, 中 心 Maxwell CUDA Core,可提供高带宽低延时的图像压缩能
偏 <3’。 提 供 多 种 AR 镀 膜 方 案, 力及 0.5T Flops 的 AI 计算能力。目前支持 GigE Vision 和
综合透过率 >97%(8~12μm)。 USB3.0 Vision 标准协议工业相机及微视 USB2.0 协议工
福特科自主设计开发的红外系列镜头,具有透过率 业相机。提供整套采集压缩及 5G 传输 SDK,配套接收端
高,传感器兼容性好。产品包括定焦、电调等系列,可根 软件,支持二次开发。自带标准 HDMI/DP 接口及 RJ45
据客户需求开发定制。产品综合透过率达 86% ;适用波段 千兆网口,方便本地调试。
900~1700nm、8~14μm ;工作温度 -40~80℃ ;分辨率高 ; 应用领域包括工业产线缺陷检测、分类筛选、OCR 识
大光圈 ;畸变低。 别以及交通安防领域的目标定位、车牌识别、人脸识别等。
福特科,www.foctek.com 微视图像,www.microview.com.cn

500万像素3D快照传感器Gocator 3520 高分辨率线扫镜头ML-6040-67M39


LMI Technologies 新推出的 Gocator 3520 智能 3D 快 茉丽特的 ML-6040-67M39 镜头,适用于 16k 3.5μm、
照传感器,搭载 500 万像素成像芯片,视野更宽,高 XY 12k 5μm 以及 150MP 的相机,最大靶面支持到 67mm,
方向分辨率、曝光时间短和快速的数据采集速率,能实现 提供 400~1100nm 的宽波段镀膜。该镜头在视场边缘的成
计量级在线质量检测。 像能力有显著提升,尤其在 0.06x 前后(即 57mm 靶面相
3520 的应用范围包括机器人搭载传感器进行在线 机,视野约为 900mm 时)。在 0.06x 左右,该镜头分辨率

视觉系统设计 Vision Systems Design China Dec 2020/ Jan 2021 37


产品撷英 Products Highlights

可达 140LP/mm,可以更好地匹配 IMX250 传感器,像素达 5.1MP ;1240 采用索尼 IMX226


16k 3.5μm 相机。与茉丽特 FF 系 背照式卷帘快门传感器,可在 12.2MP、29fps 下提供高清
列镜头相同,该镜头在改变工作距 图像,另外,得益于高达 1.85μm 的像元尺寸,该相机以
离后,重新对焦不在镜头本身,而 其较小的传感器尺寸实现了极高画质,性价比高。
是在转接环上 ;转接环是密螺牙设 这三款相机融合了工业级设计和各种硬件选项,均采
计,可使对焦更精准,从而得到更清晰的成像。 用 MIPI CSI-2 接口,让设计人员既可维持巅峰机器视觉
该镜头适用于 PCB 检测、锂电池检测、印刷检测等 性能,又方便从 PC 系统轻松过渡到嵌入式系统。
领域。 同 时,Allied Vision 还 发 布 了 适 用 于 所 有 NVIDIA
茉丽特,www.moritex.com Jetson 模块的全新 MIPI CSI-2 驱动程序,为 NVIDIA 最新
发布的 Jetson Xavier NX(SDK 版本为 JetPack SDK v4.4)
GMAX系列18MP分辨率、全局快门CMOS图 提供支持。
像传感器 Allied Vision,www.alliedvision.com
长光辰芯推出 GMAX 系列新产品 GMAX2518,该芯
片 分 辨 率 为 4508(H)×4096(V), 光 OPT-Cobra新系列定焦镜头
学尺寸为 1”。 针对市场越来越多
GMAX2518 采用先进的 2.5μm 的小靶面、小像元尺寸
电荷域全局快门像素设计,读出噪 的 相 机 需 求,OPT 推
声小于 2e-,动态范围高达 66dB。得 出 Cobra 系 列 定 焦 镜
益 于 独 特 的 光 管 技 术,GMAX2518 头,全视场分辨率可达
具有 65% 的峰值量子效率,1/10000 的快门效率以及优 230lp/mm, 适 用 于 像 元 尺 寸 2.2μm 及 以 上、 芯 片 尺 寸
秀的角度响应。采用 32 对 sub-LVDS 进行数据输出,单 ≤1/1.8"(Ø9mm)的相机。OPT-COB2528、OPT-COB3528
通道速率为 960MHz,10bit 输出时最高帧率可达 150fps, 和 OPT-COB5028B 最大可匹配芯片为 2/3"(Ø11mm)的
12bit 输出时最高帧频为 64fps。其高帧频特性,可大幅提 相机。
高工业检测效率,更好地满足工业检测和机器视觉应用的 提 供 宽 光 谱 :镀 膜 波 段 400~1000nm, 兼 容 VIS 和
需求。 NIR 波段 ;低畸变 :TV 畸变< 0.2% ;高相对照度 :主光
采用 226 针 LGA 陶瓷封装(20.8mm×19.5mm),且 线角< 5°,与相机匹配时能有效保证画面照度的高均匀性。
与 GMAX2505、GMAX2509 和 GMAX0505 管 脚 兼 容, 镜头外径 Ø29mm,与相机尺寸兼容,镜头总长不超
相机厂商能够以最小的研发投入,快速推出多款小型化工 过 42mm。
业相机。 OPT,www.optmv.com
长光辰芯,www.gpixel.com
500万像素分体式智能相机
Alvium CSI-2系列再添三款嵌入式相机新品 昂敏智能推出 500 万像素分体式智能相机 VR00AB,
Allied Vision 推 出 其 传 输 距 离 实 现 了 长 达 3m 的
三 款 Alvium CSI-2 嵌 入 新突破。相机采用安森美 1/2.5"
式 相 机 新 品 ——Alvium CMOS 图像传感器,分辨率为
1800 C-240、Alvium 1800 2592×1944 像 素, 帧 率 可 达
C-508 和 Alvium 1800 11fps。分离式传感器更方便集
C-1240。 其 中,240 采 用 成到各种应用环境中,提供黑
索尼 IMX392 全局快门传感器,可在 126fps 的帧率下提 白和彩色版本。
供 2.4MP 的分辨率 ;508 采用索尼高性价比高速全局快门 昂敏智能,www.ai-smart.com.cn

38 Dec 2020/ Jan 2021 视觉系统设计 Vision Systems Design China


产品撷英 Products Highlights

2100万像素、帧率230fps的工业相机 Go-X 系列提供丰富的标准功能,包括感兴趣区域


Adimec 公司即将发布的 CXP (ROI)、图像翻转和镜像、2×2 抽取、8/10/12 位输出、瑕
相机 QUARTZ Q-21A230,能提供 疵补偿和阴影校正等。相机尺寸为 29mm×29mm×51.5mm,
2100 万 像 素 的 分 辨 率 和 260fps 的 重量仅 62g,适用于机械臂、无人机或其他需要连续运动
帧率。在 Q-21A230 的测量速度中, 或便携性的场景。
用户可以通过以秒为单位提高系统 JAI,www.jai.com
的精度和产量。
Q-21A230 是一款低功耗的紧凑型产品。它提供了最 7MP 10GigE工业相机
佳的设计自由度,为集成光学元件、传感器对准保持良好 Pixelink 公 司 发 布 其 第 二 款 万 兆 网 工 业 相 机 PL-
性能,适用于具有大数值孔径的工业光学器件。 X957,该相机采用 7MP 1.1 英寸
Adimec,www.adimec.com 的 索 尼 第 三 代 Pregius IMX420
CMOS 图像传感器。该传感器具
Calibir GXF系列LWIR相机 备双 ADC 模式,每个像素都可
Teledyne DALSA 新 推 出 的 Calibir GXF 相 机, 是 其 以通过两个不同的增益读出。双
Calibir LWIR(长波红外)相机家 ADC 图像直接在相机上被合并成单一的混合 HDR 图像,
族中的新成员。Calibir GXF 专门针 因此不需要任何主机处理。用户可以获得 6~10dB 的额外
对测量精度和温度稳定性进行了优 动态范围,而无需占用 CPU 或额外复杂的软件算法。
化,用于探测体温的升高。它能提 PL-X957 提供彩色或单色版本,是需要高分辨率、快
供强大且精准的热辐射探测能力, 速帧率和高质量、低噪声图像的高动态范围成像应用的理
即使是在交通繁忙的公共场所,如机场、火车站和游乐园 想选择。其他规格包括 4.5µm 的像素间距、高达 112fps
等地点,也能实现精准测量。 的帧率和 70dB 的动态范围。
该相机克服了传统的 NETD/ 动态范围权衡,能在 Pixelink,www.pixelink.com
NETD 低于 50mK 的情况下,实现超过 600℃的动态范围。
Teledyne DALSA,www.teledynedalsa.com 92.7kHz高速CCD线扫相机
Chromasens 公 司 推 出 的 ChromaPIXA 2K 三 线 CCD
Go-X系列小型工业相机 线 扫 相 机, 能 提 供 高 达 92.7kHz 的
JAI 推出 Go-X 系列小型工业相机系列,提供严格的 最大线扫速率。
防尘罩、牢固可靠,提供 80G 和 该相机专为在线颜色测量而设
10G 的抗冲击和抗振动性能,能 计,可检测 2048×3 分辨率的任何
够适应环境恶劣的工业现场应用。 颜色变化,以帮助改善下游颜色处
售价 289 欧元起,6 年保修。 理,满足质量标准,同时有助于消
Go-X 系 列 共 包 含 24 种 不 除高昂的生产浪费成本。ChromaPIXA 2K 以 LAB 格式
同 型 号, 分 辨 率 包 括 2.3MP、3.2MP、5.0MP、8.9MP 和 输出,在基于 web 的颜色验证系统中,提供无与伦比的
12.4MP。接口选项包括 GigE Vision 或 USB3 Vision、支 缺陷检测,具有优异的一致性。连续白平衡保证了稳定
持通过接口供电(PoE/PoUSB)或使用通过 I/O 连接独立 的白点,以匹配应用的光源,并且考虑到了轻微的色差
电源。 问题。
Go-X 系列采用索尼 Pregius CMOS 全局快门传感器, 颜色校准系统内部转换 CCD 传感器的光谱响应,以
其 中 包 括 IMX26、IMX264、IMX252 和 IMX250 等, 能 实时匹配 sRGB、eciRGB、AdobeRGB 或 CIE-XYZ 等标准。
在 5MP 分辨率下实现帧率 74fps,或在 3.2MP 分辨率下 为了增加多功能性,可以使用 F-mount 或 C-mount 镜头。
达到 119fps 的帧率。 Chromasens,www.chromasens.com

视觉系统设计 Vision Systems Design China Dec 2020/ Jan 2021 39


广告索引 Ad Index

Advertiser 广告商名称 网址 页码
堡盟电子(上海)有限公司 www.baumer.com 7
Coolens 视清科技 www.coolens.cn 19
Computar www.computar-global.com 31
Edmund Optics China www.edmundoptics.cn/120-8630 11
onsemi www.onsemi.cn IBC
Teledyne Dalsa www.teledynedalsa.com/xtium2 IFC
The Imaging Source www.sunvision.net.cn 17
Santec www.santec.com/en/products/oct/OCT/ 15
SIAF 2021 www.spsinchina.com 1

投稿指南
《视觉系统设计》杂志及网站长期接收投稿,投稿内容可 5、涉及视觉技术的其他内容。
以涉及:
1、公司及行业新闻。 投稿要求
2、公司最新产品发布——详细介绍产品的主要特性及相关 1、请用简体中文书写,提交word文档。
参数,主要适用 2、请提供高清图片文件(JPEG格式),照片的分辨率不
3、最新视觉技术报道——内容可涵盖照明、镜头、相机、 低于300dpi,大小不低于100万像素。
图像传感器、图像采集与处理、视频接口、软件等视觉 3、网站投稿文章长度不限。
领域的各个方面。 4、杂志投稿文章长度约3500字。
4、应用案例——内容可设计视觉系统在工业、智能交通、科
研、医疗、食品、军事等各行各业的应用实例。 投稿邮箱: Email:rossiep@actintl.com.hk

www.vision-systems-china.com

行政及销售人员 Administration & Sales Offices


HK Head Office (香港总部) China (中国) Korea (韩国)
ACT International (雅时国际商讯) Hong Kong (香港特区) Judy Leger, jleger@endeavorb2b.com
Unit B, 13/F, Por Yen Building, Mark Mak (麦协和), markm@actintl.com.hk Tel: (603) 891 9113
No. 478 Castle Peak Road, Tel: 852 2838 6298 Taiwan, Singapore, Malaysia
Cheung Sha Wan, (台湾,新加坡,马来西亚 )
Kowloon, Hong Kong Shanghai (上海)
Sales Director (销售总监) Regional Sales Director
Tel: 852 2838 6298 Mark Mak (麦协和), markm@actintl.com.hk
Hatter Yao (姚丽莹), hattery@actintl.com.hk
Publishing Director (出版总监) Tel: 852 2838 6298
Helena Xu (许海燕), helenax@actintl.com.hk
Adonis Mak (麦协林), adonism@actintl.com.hk
Amber Li (李歆), amberl@actintl.com.hk North America (北美)
General Manager - China (中国区总经理) Tel: 86 21 6251 1200 Judy Leger, jleger@endeavorb2b.com
Michael Tsui (徐旭升), michaelt@actintl.com.hk
Shenzhen (深圳) Tel: (603) 891 9113
Editor-in-Chief (总编辑)
Jenny Li (李文娟), jennyl@actintl.com.hk Germany, Austria, Northern Switzerland,
Rossie Pang (庞会荣), rossiep@actintl.com.hk
Gavin Hua ( 华北平), gavinh@actintl.com.hk Eastern Europe
Tel: 86 755 2598 8573/8567 Holger Gerisch, hgerisch@endeavorb2b.com
US Office
Beijing (北京) Tel: 49 0 8801 9153791
ENDEAVOR Business Media, LLC
61 Spit Brook Rd, 5th Floor Nashua, NH 03060 Cecily Bian (边团芳), cecilyb@actintl.com.hk Israel
Tel: 86 135 5262 1310 Dan Aronovic, aronovic@actcom.co.il
Group Publisher
Paul Andrews, pandrews@endeavorb2b.com Tel: 972 9 899 5813
Wuhan (武汉)
Tel: (603) 891 9447 Grace Zhu ( 朱婉婷),gracez@actintl.com.hk
Editor in Chief Tel: 86 159 1532 6267
John Lewis, jlewis@endeavorb2b.com
Tel: (603) 891 9130 Asia (亚洲)
Editor Japan (日本)
James Carroll Jr., jcarroll@endeavorb2b.com Masaki Mori, masaki.mori@ex-press.jp
Tel: (603) 891 9320 Tel: 81 3 6721 9890

40 Dec 2020/ Jan 2021 视觉系统设计 Vision Systems Design China


2021年3月3-5日
广州·中国进出口商品交易会展馆

SIAF 广州自动化展明年 3 月聚焦智能制造成果,


开辟全新物联网与自动化互动专区,
构建华南智能工厂新视野

第 12 届 SIAF 广州国际工业自动化技术及装备展览会将于 2021 年 3 月 3 至 5 日在广州中国进出口商品交易会展馆举行。展会


将涵盖全球创新工业自动化技术成果,并聚焦工业机器人、传动系统、传感器、人机界面(HMI)和嵌入式系统、连接和电气技术等
领域。基于工业互联网在当前数字化创新时代的巨大商业潜力,展会主办方将新增物联网专区,集中展示前沿的工业互联网、软件
和系统相关的解决方案。

新设物联网专区呈现制造业创新成果
随着工业互联网的兴起,越来越多企业加速推进数字化转型。工业互联网的技术应用正逐步改变行业发展和制造商的日常运作
方式。加上高速 5G 无线传输技术,工业互联网将不断提高生产效率,释放未来虚实整合生产系统的全部潜能。为满足市场需要,
SIAF 2021 展会将新设物联网专区,帮助观众发掘市场上最新的物联网解决方案和产品。目前已确定参展的企业包括 :施迈赛工业开
关制造、深圳市老狗科技、广州鲁邦通物联网科技、深圳华茂欧特科技、上海洛丁森工业自动化设备、精奇(天津)科技、昆仑工控、
深圳市联瑞电子及深圳科迪通达科技等。
作为物联网专区展示创新成果的预热活动,SIAF 广州自动化展携手国际智能制造产业联盟物联网专业委员会于 2020 年展会上
举办了“智能制造 + 物联网”论坛—当工业自动化遇见物联网,围绕物联网材料、运营和监控、感知、产业应用等方面进行深入、
1229安森美-网�直播会�-�志广告半版横.pdf 1 2020/12/8 15:34:20
广泛的交流。来自树根互联技术有限公司云制造首席专家魏吉祥先生于论坛分享他对物联网的见解,对 SIAF 的商贸和同期活动平台
的效果表示高度赞扬 :“行业的发展有赖于持续的创新和协作努力,这个展会有效地鼓励行业对话。我十分欣赏展会的同期活动,它
提供了一个高效平台让行业同仁互动和交流市场见解。”

安森美半导体
领先的成像技术
助您推进工业创新
直播时间:2020.12.29 周二
演讲人:王克剑

www.onsemi.cn 扫码报名
视觉系统设计 Vision Systems Design China Dec 2020/ Jan 2021 3
2021

跨超低谷,
“视”不可挡
——VisionCon 2021带你把握市场复苏增长中的新机遇
工业机器视觉、人工智能作为实现工业自动化、智能化不可或缺的技术,正在中国制造业中广泛部署应用。在经过
2020 年的发展放缓后,预计 2021 年中国制造业向高端转型升级的范围和速度都将进一步扩大。如何在蕴含巨大商机
的中国制造业市场中,抓住工业机器视觉环节的增长机会?由雅时国际商讯(ACT International)和《视觉系统设计》
(Vision Systems Design China)联合主办的 VisionCon 视觉系统设计系列会议,2021 年将走进厦门、苏州、深圳、
成都和上海,我们将邀请机器视觉行业产业链上的器件厂商、系统集成商、企业用户及科研机构等业内人士共聚一堂,
共同探讨最新的机器视觉技术在制造业中的发展机会!

厦门 苏州 深圳 成都 上海
4月 6月 8月 10月 12月

研讨话题(部分)
• 3D成像技术在工业制造中的应用 • 深度学习在工业机器视觉中的应用 • 偏振成像技术与工业缺陷检测
• 工业相机、工业镜头、光源/打光技术的新发展 • 嵌入式视觉系统开发及应用 • 多光谱/高光谱成像技术及应用
• 被AI和视觉赋能的工业机器人及应用 • 5G为工业机器视觉带来的新机会

历届赞助企业(部分)

会议咨询
Hatter Yao 姚丽莹 Finn Wu 吴 伟 Lainy Gao 高秀芹
Tel:86-139 1771 3422 T:86-137 6156 8429 Tel:86-188 5599 9175
E-mail:HatterY@actintl.com.hk E-mail:FinnW@actintl.com.hk E-mail:LainyG@actintl.com.hk

主办单位 大会媒体
扫码预登记

You might also like