DARPA启动FENCE计划 将寻求开发模仿人脑的相机技术

据外媒报道，美国国防部高级研究计划局（DARPA）宣布启动基于快速事件的神经形态相机和电子学（FENCE）计划，该计划旨在通过模仿人脑处理信息的方式使计算机视觉相机更有效率。由雷神公司（Raytheon）、BAE系统公司和诺思罗普·格鲁曼公司领导的三个科学家团队的任务是开发一种需要处理更少数据、操作更快、使用更少功率的红外（IR）相机系统。

现代成像摄像机正变得越来越复杂，但它们也正成为其自身成功的受害者。虽然最先进的相机可以捕获高分辨率的图像，并能非常精确地跟踪物体，但它们是通过处理大量的数据来实现的，这需要时间和电力。

根据DARPA的说法，当任务是在晴朗的蓝天上跟踪飞机时，这很好，但如果背景变得杂乱或开始变化，就像军事行动中经常发生的那样，这些相机很快就会被受影响。

FENCE计划希望做的是创建基于事件的摄像机，由于使用了大脑模拟或神经形态电路，这些摄像机更加智能。这些电路的作用是，通过忽略图像中不相关的部分，大幅减少需要处理的数据量。基于事件的相机不是处理整个场景，而是只关注发生变化的像素。

为了实现这一目标，FENCE团队正在研究一个新的低延迟、低功耗、基于事件的红外（IR）焦平面阵列（FPA），一个异步读出集成电路（ROIC），以及一个帮助ROIC识别相关空间和时间信号的处理层。还需要新的数字信号处理和学习算法来处理复杂、变化的背景。

其结果可能是使用不到1.5瓦功率的FENCE传感器。因为这项新技术的目标是军事应用，包括自主车辆、机器人和红外搜索和跟踪，传感器将需要灵活和适应性强。

领导FENCE项目的项目经理惠特尼-梅森博士说：“我们的目标是开发一种‘智能’传感器，它可以智能地减少从摄像头传输的信息量，将考虑的数据缩小到只有最相关的像素。”