Towards Self-Supervised High Level Sensor Fusion

[DeepTecher]

Towards Self-Supervised High Level Sensor Fusion

Date:2019-02-12 Team: 奥迪深度学习相关子公司AEV(Audi Electronics Venture)、慕尼黑工业大学和加州Artisense公司

摘要：
在本文中，我们提出了一个框架，通过融合RGB图像和深度图的原始信息来控制自动驾驶汽车。 深度神经网络架构用于分别将视觉和深度信息映射到转向命令。 来自两个传感器源的信息融合允许在存在传感器故障的情况下提供冗余和容错。 即使其中一个输入传感器无法产生正确的输出，其他功能的传感器仍然能够操纵汽车。 这种冗余对于自动驾驶汽车的关键应用至关重要。 实验结果表明，即使其中一个传感器在没有任何明确信号的情况下发生故障，我们的方法也能够学习使用相关的传感器信息。