三维场景实时重建


  • 研究方向

    目前重点研制高能效的、复杂场景感知与快速重建的装置与系统。基于此进一步研究基于无人机五相机的实时场景重建,无人车的实时场景重建,机器人视觉的实时场景重建,进而实现对场景动态目标快速识别与跟踪。

  • 特色

    场景重建中心针对场景感知与快速重建问题,对复杂场景进行场景不变量快速计算、并能够对场景动态目标快速识别与跟踪的设备装置,其核心技术特色为:

    • 1. 多感知信息融合、先验数据库引导下实现三维场景感知、快速重建计算;
    • 2. 利用场景多种语义特征的关联计算进行场景目标的快速识别与跟踪;
    • 3. 平台灵活的控制手段与实时更新场景语义信息,使得无人机/无人车自主智能得到相应的提高;
    • 4. 高能效的并行计算平台,克服了当前设备无计算能力或者计算能力低下的问题。
  • 研究意义

    场景重建中心重点研究并解决场景理解困难、数据传输处理量大,场景重建处理计算困难等目前在三维场景行业应用中普遍存在的问题。通过基于ARM+GPU,FPGA的架构构建快速实时的三维场景重建装置及系统推动并提升行业的转型升级与快速发展。

    场景实时重建的核心是采用硬件来实现三维重建算法,除了在无人机五相机吊舱使用,在无人车等领域也有广泛应用,目前无人车采用激光三维重建的成本偏高,且有大量的三维数据的处理时效问题,而场景重建装置是进行实时的三维重建,三维重建的目的就是克服场景中二维图像理解的不足,提高对场景的理解能力,这些都是中心重点研究并解决的核心问题,也是场景感知和理解的核心问题,因此中心研究成果的适用范围可以大为扩大,甚至会变成一个使用广泛的三维场景理解硬件系统,在无人机,无人车系统和智能机器人系统中将会有广泛应用。

  • 未来规划

    场景重建中心的定位是实时三维场景重建技术研究以及基于软件、硬件场景重建平台的创新开发,计划在2年内成为国内顶尖的三维场景实时重建领域科研机构以及与其他科研、业界机构的交流合作平台,中心在项目研究过程中会培养一批高素质的科研及应用开发人才。