一种防抖、宽视野的仿生眼

本项目面向室内外环境下对目标和环境的可靠快速感知需求，突破高性能主动适应的混合稳像、动态目标快速搜索追踪、智能探索感知的快速地图创建和定位与场景理解关键技术，研制具有高稳定性、宽视野功能的仿生眼样机一套，可实现快速追踪动态目标，实现环境三维建模与场景理解，成果将为机器人智能化、自主化导航提供主动感知的新途径。重点开展如下研究：

1）具有高稳定性、宽视野功能的仿生眼研制

研究仿生眼的结构高动态轻量化优化设计及优化的电机驱动方式，提出眼球各自独立运动、眼颈协调的关节配置方案，研究多轴关节的实时同步控制，研究图像传感器、IMU传感器及RGBD传感器的硬件高精度同步方法及GPU加速方法，实现对环境的高精度时间同步视觉感知。

2）高性能主动适应的混合稳像算法

针对图像抖动模糊问题，研究主动适应的机电混合稳像算法；结合姿态反馈信息通过眼颈关节协调进行适应性姿态调整去除低频扰动，通过IMU及图像时间序列进行相机6D位姿估计与滤波消除高频扰动，实现主动适应混合稳像算法。

3)动态目标快速搜索追踪算法

针对快速运动的视觉目标，研究基于深度强化学习和注意力机制的目标跟踪算法；同时研究基于眼颈运动神经回路控制机理的眼颈协调优化视觉伺服跟踪算法，使冗余眼颈关节实现优化协调运动，实现时间最优快速目标追踪。

4）智能快速地图创建和定位与场景理解

针对未知场景，基于双眼RGB图像序列及深度传感器信息，生成仿生眼环境观测的序列决策指令，实现更优更快的环境地图创建。实现室外环境三维建模与场景理解。