关于ZAKER 免费视频剪辑 合作 加入
盖世汽车 05-18

Xylon 记录仪 - 色彩决定一切

Xylon 记录仪通过 HDR ISP 处理可以记录彩色视频用于神经网络训练和闭环 HIL 仿真。

视频摄像头已经逐渐从最初的汽车后视镜应用发展到智能传感器,可以检测道路上的物体,并通过自动刹车和车道保持等驾驶辅助来提高安全性。最近的 ADAS/AD 的发展已经使摄像头成为感知汽车周围环境不可或缺的工具。虽然激光雷达和雷达在传感器融合中能够比较可靠地检测道路障碍物,在全天候提供最大程度的昼夜信息,但实际上只有视频摄像机能够最准确地识别和分类车辆周围的物体。

传统的计算机视觉系统依赖灰度视频来识别形状,并在一定程度上依赖基本色度,例如交通标志识别,而基于机器学习和深度神经网络 ( DNNs ) 的现代视觉系统往往需要色彩来理解世界。颜色决定了一切,使神经网络更好地模仿人类大脑。

DNNs 必须经过训练,才能在特定的 ADAS/AD 应用中以最大的可靠性协同工作。训练过程使用带有精确标注的数据集在算力强大的服务器上进行。

经过训练的参数在 ECU 控制器中的 GPU、FPGA 或视觉处理器上进行 DNNs 实现。全彩色视频需要从指定摄像机位置和来相同视频传感器和镜头的获取,以确保 DNNs 尽可能可靠。然而,收集这些视频的过程要困难得多。

车载摄像头不会产生颜色,它们生成的颜色信息编码为众多拜耳编码变体之一。此外,常用的高动态范围 ( HDR ) 相机以不同的曝光方式生成两到三帧,组合在一个帧中,可以显示被阳光直射的物体和被放置在极端阴影中的物体。

ISP 管道问题

生成高对比度的彩色视频需要通过一个称为 HDR 图像信号处理 ( ISP ) 的专用硬件进行处理。HDR ISP 管道通常由同一 Soc 芯片中的 DNNs 实现,这使得在 DNNs 输入处处理的彩色视频很难用于芯片外的标注和机器学习。这一问题可以通过对处理后的彩色视频进行数据记录来解决。由于 ISP 管道对数据执行大量像素操作,这种处理需要硬件升级到标准数据记录仪级别。

Xylon 的 logiRECORDER 汽车 HIL 视频记录器是一种完美的解决方案。它以可编程 FPGA 为基础,实现了芯片级的 HDR ISP 集成。这确保了经过处理的视频的完整性,并通过其他车辆传感器的数据并行记录来提供完整的传感器融合支持。

Xylon 在设计可编程芯片方面有超过 25 年的经验,它的 logicBRICKS 库包括用于可编程 FPGA 和 SoC 芯片中的 ISP 处理的 IP 核。它使 Xylon 能够直接在数据记录仪的视频 I/O 模块中实现 HDR ISP,动态地处理原始视频并记录彩色视频。

Xylon ISP 处理的视频与 ECU soc ISP 处理的视频之间的差异是非常小的。Xylon 与客户合作,针对特定的摄像机进行 ISP 调优,并通过 DNNs 训练实现最佳的视频质量。

除了数据记录,logiRECORDER 独特的 HIL 回放功能可以将记录数据直接注入连接的 ECU。可编程的 HDR ISP 块集成在 logiRECORDER 的视频输出,相当于真实的相机仿真。而不是简单地回放记录的数据,logiRECORDER 的 HDR ISP 块修改视频以响应 ECU 的命令。这种闭环 HIL 与 ECU 运行的固件大大提高了最终产品的质量保证。

所提出的解决方案已经与几个 Xylon 客户建立了原型,计划于 2022 年第三季度推出可量产的解决方案。

虹科云课堂——在线加油您的未来

2020 年 2 月 21 日,虹科云课堂首次与大家见面,带来的第一节《CAN 总线基础之物理层篇》课程,就得到了各位工程师朋友们的热情支持与参与,当晚观看人数 4900+。我们非常感恩,愿不负支持与鼓励,致力将虹科云课堂打造成干货知识共享平台。

目前虹科云课堂的全部课程已经超过 200 节,如下表格是我们汽车相关的部分课程列表,大家通过微信扫描二维码关注公众号,点击免费课程直接进入观看,全部免费。

关于虹科

广州虹科电子科技有限公司(前身是宏科)成立于 1995 年,总部位于中国南方经济和文化中心 - 广州。在上海、北京、台湾、美国硅谷设有分公司,在西安、成都、武汉、深圳、香港设有办事处。同时,也正在积极筹备南京、苏州、重庆、青岛办事处。

虹科每年发布了超过业内平均水平的专利数量,并先后评为科技创新小巨人、高新技术、守合同重信用等企业。我们积极参与行业协会的工作,为推广先进技术的普及做出了重要贡献。近几年,虹科高速发展,我们已经成为所在领域的知名公司,并多次获得行业大奖。

车辆网络事业部在汽车总线行业经验超过 10 年,与世界知名的 CAN、LIN 总线供应商 PEAK-System、Lipowsky、IHR 等合作 10 年之久,提供领域内顶尖水平的 CAN/LIN 分析仪和测试方案,同时也提供汽车以太网,时间敏感网络(TSN)的仿真测试工具和方案。虹科自主研发的 EOL 测试软硬件系统已经在业内完成多次安装和测试,事业部所有成员都受过国内外专业培训,并获得专业资格认证,五位工程师平均 5 年 + 技术经验和水平一致赢得客户极好口碑。

以上内容由"盖世汽车"上传发布 查看原文
一起剪

一起剪

ZAKER旗下免费视频剪辑工具

一起剪

觉得文章不错,微信扫描分享好友

扫码分享