感知摄像头在环仿真测试系统介绍

来源:世展网 分类:品牌展行业资讯 2024-02-06 17:03 阅读:7947
分享:

2024年深圳国际艺术博览会-深圳艺术展ART Shenzhen

2024-12-05-12-08

展会结束

关注公众号,点击公众号主页右上角“ ··· ”,设置星标,实时关注智能汽车电子与软件最新资讯

无人驾驶技术在当今5G和人工智能的催生下越发蓬勃地发展,满足完全面向L3 +的自动驾驶能力是未来两年国内外自动驾驶技术产品化的主要目标。对于L3+的自动驾驶系统需要在给定的运行区域内,除了完成车辆横向和纵向的控制外,还需要实现目标事件的检查和响应。所以对于L3+的自动驾驶系统,其感知和控制决策就变的尤为重要,这更加需要极大关注感知系统的能力,对传感器的布置、性能、感知算法等都需要进行充分的设计验证。

但是,当前传统的实车路试等测试手段已经难以在有限的时间内覆盖自动驾驶汽车所有可能的运行场景,AI的应用又急剧扩大了对测试场景规模的要求,尤其是现实中偶有发生而又会对驾驶造成极大安全隐患的边缘场景更加考验自动驾驶系统的感知和决策控制。数字化的仿真正是目前解决自动驾驶测试技术场景覆盖度这一难题的有效手段,通过快速便捷的场景和驾驶仿真技术,可以帮助用户在短时间内实现大规模多场景的仿真测试验证,从而让仿真从真正意义上加速整体测试开发流程。

面向L3+的自动驾驶应用提供的基于物理的传感器与驾驶仿真技术,可以有效的构建一套高保真的自动驾驶仿真体系,包括面向功能安全和SOTIF的安全性分析平台、传感器部件设计与仿真工具、面向感知算法的鲁棒性测试等,从而将仿真技术真正应用到自动驾驶汽车的测试验证中。

高精度的L3+自动驾驶应用传感器与驾驶仿真:

面向L3+的自动驾驶应用提供了一系列可扩展的面向高级自动驾驶功能设计、开发和测试验证的工具和系统平台,针对目前难度较大的感知系统仿真验证,提供高精度的物理传感器、三维环境与驾驶仿真能力,从而缩短自动驾驶的测试周期和巨大的路试花费。主要包括以下几方面能力:

构建高精度的传感器仿真与验证能力。面向自动驾驶的物理传感器仿真测试工具 ,该工具提供给用户基于光学和电磁学求解器的传感器仿真,通过传感器原始数据RAW Data的输出,帮助用户实现与三维场景、感知算法、控制算法统一的自动驾驶系统的实时闭环仿真。同时工具具备的丰富接口可以提供用户实现与多种第三方驾驶仿真工具的联合仿真。工具目前支持摄像头、激光雷达和毫米波雷达三款主流传感器的物理级仿真。

基于物理的摄像头模型支持标准镜头、鱼眼镜头和环视多摄像头的仿真,通过对镜头模型、图像传感器模型、处理器模型、风挡参数等五十多个物理参数的设置,可以表现出摄像头成像中如过曝、噪点、畸变、色散等一系列物理现象,实现原始图像数据输出。基于物理的摄像头仿真能力,可以很好的应用于基于视觉传感器的辅助驾驶和自动驾驶功能中,如FCW 、LDW、APA、LKA等等同时支持的图像注入模式可以帮助实现图像帧的像素电平信号输出,进行基于摄像头ECU的硬件在环(HiL)测试。

基于物理的激光雷达模型包含有旋转式和固态扫描式两种模式,通过对环境、脉冲发射器、脉冲接收器光学组件、脉冲接收器电学组件、处理器模型等三十多个物理参数的设置,可以表现出激光雷达探测中出现的回波损失、光谱吸收、运动畸变等一系列物理现象,实现激光脉冲原始点云数据、回波强度数据和波形数据等信息输出。

基于物理的毫米波雷达模型采用HFSS SBR+ 弹跳射线法,基于GPU加速的可以实现毫秒级的实时雷达仿真,包含FMCW和PDW两种调制波形仿真以及多通道MIMO雷达仿真。通过对发射天线,接收天线和波形参数等三十多个参数的设置,可以表现出毫米波雷达回波损耗、腔体振荡、表面散射,微多普勒效应等一系列物理现象,实现波形原始强度和相位信息、多普勒回波数据等数据输出。

构建基于安全分析的仿真验证能力。基于安全分析仿真测试流程,可以满足在选定SOTIF相关用例的基础上进行传感器故障注入测试,软件感知算法的鲁棒性测试等一系列仿真手段。

▲ 摄像头在环测试-逆光案例

让我们从一个摄像头在环测试的逆光案例开始。从测试案例中可以看出,在逆光和地面积水反光影响下,被测摄像头目标检测算法并不能很好的检测同车道前方车辆。不过对于摄像头仿真真实度很高的仿真软件却很容易实现,且能够通过对天气和光照的泛化产生大量类似测试案例。

▲ 黑箱示意图1

▲ 黑箱示意图2

表1 摄像头在环黑箱主要部件

3、在环测试评价通常,摄像头从拍摄到识别出感知结果会有一定时延,不同厂家的摄像头的系统时延也不一样。如需对感知结果进行评价,就需要对感知结果和仿真真值进行时间对齐。这里的时延包括仿真视频流渲染到黑箱内显示屏的传输时延、摄像头拍摄显示屏光电转换并作图像处理的时延,感知算法获取摄像头图像并作识别的时延、以及感知真值通过网络传输到计算平台的时延。感知评价程序会计算出该系统延时,并基于时间对齐后的感知结果和仿真真值作算法评价。

▲ 摄像头在环评价系统界面示例1(左侧为信息提示栏以及功能实现按钮,右侧图表区域用于显示统计结果)

▲ 摄像头在环评价系统示例2

该示例评价算法支持目标识别算法和车道线识别算法两类。除了平均检测率、漏检率和误检率之外,还支持对不同大小和不同距离的目标物的识别率进行评价。该评价示例中,小目标定义为32x32像素以下;中等目标定义为96x96像素以下;96x96像素以上则为大目标。评价算法还可以显示不同类型目标随着时间变化的检测趋势变化情况。

▲ 多传感器仿真-5摄像头1激光雷达

视频注入对摄像头仿真的真实性要求较高,比如真实摄像头的色彩还原、动态范围、信噪比和清晰度等都需要仿得足够真。仿真设备支持与专业图像质量评测实验室结合,把摄像头的图像质量标定结果直接输入仿真系统,仿真出无限接近于真实摄像头效果的视频流。

▲ 图像质量评测实验室

八项核心功能

可检测不同天气和光照条件下的摄像头算法表现。如:云、雨、雪、雾、顺光、逆光、炫光、低光照等。 支持各项内外参设置。如:摄像头的安装位置、角度、帧率、视野范围(FOV)、焦距等。 支持多种摄像头接口类型。包括:GMSL、FPD-Link、GigE、CSI-2、USB3.0、LVDS、CAN等。 覆盖多种视觉算法。如:摄像头目标检测和跟踪算法、车道线检测算法、语义分割和实例分割算法等。 丰富的评价目标类型。包括:小汽车、卡车、巴士、行人、自行车、摩托车、交通牌、交通灯、车道线以及其他感兴趣的障碍物。 多维的视觉算法的评价指标。包括检测帧率、平均检测率、漏检率、误检率、小目标检测率、近距离目标检测率以及检测趋势变化等。 支持与摄像头图像质量标定实验室合作。把摄像头的标定结果(色彩还原、动态范围、信噪比、清晰度、色相差等)输入仿真系统,把仿真视频流注入到计算平台。 支持存储仿真视频流为h264或mp4格式,以及视频流中每一帧的真值,用于离线注入和评价。这也是虚拟标注数据集的重要功能之一。黑箱四大优势

1、仿真真实性高拥有高质量和多样化的仿真场景,且可与专业摄像头图像质量标定实验室结合,可定制化标定并仿真特定摄像头成像效果。2、软硬协同,双重保障基于软件开发,软硬件协同搭建出的仿真测试环境,既能够保证仿真效果,又能够兼顾硬件测试需求。3、支持高度定制支持的测试摄像头接口类型覆盖目前全部主流车载、工业摄像头接口,可定制化接入各类域控制器、计算平台、工控机和PC机。同时,支持高度定制化开发,支持在摄像头光路上添加各类挡风玻璃材质、凸(凹)透镜等,最大限度还原工况。4、测试评价一体化配套有摄像头在环仿真测试评价系统,通过实时获取被测摄像头的识别结果数据,实时记录对应仿真场景中的景物信息真值,从而对测摄像头或算法进行量化评价。

来源:汽车产业前线观察

   --END--

关注公众号,点击公众号主页右上角“ ··· ”,设置星标,实时关注智能汽电子与软件最新资讯

会务组联系方式  

展会咨询13248139830

相关品牌展行业展会

2025年香港春季电子展-香港消费电子展Hong Kong Electronics Fair

2025-04-13~04-16 展会结束
356517展会热度 评论(0)

2025年香港资讯科技展-香港国际科创展ICT EXPO

2025-04-13~04-16 展会结束
95703展会热度 评论(0)

2025年北京国际动力传动与控制技术展览会PTCBJ

2025-05-21~05-23 展会结束
46152展会热度 评论(0)

2025年广州国际包装供应链展览会CPSE

2025-06-05~06-07 展会结束
49700展会热度 评论(1)

2024年深圳国际艺术博览会-深圳艺术展ART Shenzhen

2024-12-05~12-08 展会结束
86314展会热度 评论(0)

2025年上海国际旅游民宿产业博览会上海旅游民宿展

2025-07-17~07-19 距离37
52883展会热度 评论(0)
X
客服
电话
13924230066

服务热线

扫一扫

世展网公众号

微信小程序

销售客服

门票客服

TOP
X