昱感微“多维像素”融合感知方案助力汽车厂商实现技术跃迁
昱感微推出的多传感器融合技术,将多模态数据处理中最为复杂、最难以预测的“后融合算法”难题,从软件层迁移至硬件前端,转化为高度稳定、易于调用的“标准化数据读取”过程。这项创新为汽车制造商带来了全新的技术价值与应用可能。
其核心产品——超级摄像头模组,能够在模组内部完成摄像头、雷达与红外传感器的多模态目标及环境感知的实时“时空对齐”处理。通过将各传感器采集的物理信息以“图像像素”为单位进行精准融合,最终输出“多维像素”格式的数据。每个像素点不仅包含视觉信息,还承载了距离、速度、材质、热辐射等多维度参数,极大丰富了感知的维度。
在传感器数据的最原始阶段(光电转换之后),昱感微通过模组内专用芯片(ASIC)实现时钟同步、坐标统一和像素级绑定。这种设计相当于在“视网膜”层级完成信息整合,而非依赖“大脑”——即域控制器——进行后期模糊拼接。这种“多维像素”数据结构,构成了一个高维向量像素模型,其表达形式为:Pixel(x, y) = [亮度, 颜色, 距离, 速度, 材质, 温度…]。该模型不仅体现了技术实现上的创新,更标志着从传统融合范式向数据原生融合的深刻转型。
昱感微的融合方案并非简单地堆叠多个传感器,而是对感知系统进行结构性重构。其价值核心在于:将多模态融合中不稳定、难以控制的问题,转化为前端硬件层面的“标准化输入”,从而为汽车OEM厂商提供一种可复用、高可靠性、低复杂度的融合数据源。
核心价值:为OEM提供“降维打击”式技术优势
| 价值维度 | 传统多模态融合的挑战 | “多维像素”方案的优势 |
| 开发效率 | “对齐地狱”问题:算法团队的70%精力耗费在时空同步、数据校准、坐标变换等低层任务,开发周期长,出错率高。 | “开箱即用”体验:提供像素级对齐的标准化数据流,算法开发可直接进入高阶语义理解与决策阶段,整体开发周期预计缩短50%以上。 |
| 系统性能 | “信息损失”现象:后融合在特征层进行拼接,原始物理数据(如精确多普勒速度)丢失,融合结果的置信度存在冲突。 | “物理真值”保障:每个像素自带精确的多模态物理参数,为系统提供高可信度、可解释的基础感知数据,显著增强感知系统的鲁棒性。 |
| 硬件成本 | “堆料竞争”局面:为提升性能常需增加传感器数量或采用更高规格设备,推高BOM成本。 | “效率革命”实现:单个模组即可满足多种传感器功能,通过提升信息密度和质量优化系统总成本。感知数据传输成本预计降低60%以上,域控算力效率提升一个数量级。 |
| 架构升级 | “烟囱式架构”问题:各传感器独立运行,系统维护复杂,算力瓶颈集中在域控制器。 | “解耦与标准化”设计:将融合处理前移至模组内部,减轻域控制器负担,推动整车电子电气架构向简洁化、可升级方向演进。 |
在126线固态激光雷达与可见光摄像头的模组中,通过实时处理和映射,实现了点云信息与图像帧的无缝融合;而在毫米波雷达与摄像头组合系统中,使用开源目标识别算法(如Yolo V8),在“多维像素”数据基础上实现了高效的目标识别与点云滤波处理。
在目标识别框中,目标的距离(d := xx m)和相对速度(s := xx m/s)直接从对应像素点的毫米波雷达数据提取,无需额外算法处理。这种“时空对齐”能力使得域控处理器能够在算力不变的前提下,充分利用多模态数据,实现更准确的目标感知。
昱感微的“多维像素”方案本质是提供“加工后的感知原油”,而非让OEM厂商自行处理原始、杂乱的传感器数据。这种模式帮助车厂实现:
- 加速高阶功能落地:显著降低城市NOA、自动泊车等复杂功能的开发门槛和验证周期。
- 打造差异化体验:依托更全面、可靠的感知数据,开发更具智能化与拟人化的驾驶策略。
- 优化整车成本与架构:为集中式EE架构的演进奠定基础。
此外,“多维像素”以摄像头图像作为统一坐标基准,使OEM厂商可继续使用已有图像数据集进行模型训练,无需重新采集,既节省成本,又提升研发效率。
这项技术标志着从“后融合”向“前融合”再到“感知原生融合”的深刻演进。它不仅是技术突破,更是智能汽车感知系统演进过程中的关键数据基础模型,有望成为下一代智能汽车的标准接口。
来源:昱感微电子