光子智能感知

感知是一种高级的信息获取形式，通常需要从完备数据集中通过某种参数的提取来实现。以机器视觉任务为例，需要感知的信息，比如运动、轨迹、识别等，都需要先进行图像获取，再对图像进行抽象化和特征化，最后根据视觉任务的需要，提取相应的感知信息。这其中产生了大量的信息冗余，使得数据传输、处理、计算等效率降低。针对这种情况，我们提出利用光子智能的方式进行视觉感知，在光学图像或视频信号转换为电信号之前，进行光学域的信号处理，完成特征信息提取功能。这样就使得光信号转换成电信号的时候，所采集的信息不是完整图像信息，而是数据量大幅下降的特征信息，完成光子智能感知功能。该方法将大部分图像或视频的特征处理功能在光学域完成，具有超高速、低功耗、低计算量的优点，并针对不同的视觉任务具有空间、时间或时空联合特征的感知功能，为高效的感算一体智能感知系统提供了解决方案。该研究方向与华为、商汤等高科技公司进行紧密合作，具有很强的实用性。