重庆理工大学学报(自然科学) ›› 2022, Vol. 36 ›› Issue (2): 126-134.

• 信息·计算机 • 上一篇    下一篇

基于RGB D图像的移动端点云分割方法研究

余方洁1,2,王 斌1   

  1. 1.中国科学院长春光学精密机械与物理研究所; 2.中国科学院大学
  • 发布日期:2022-03-14
  • 作者简介:余方洁,男,硕士研究生,主要从事深度学习和计算机视觉研究;王斌, 男,博士,研究员,主要从事图像恢复、深度学习、波前探测等研究

  • Published:2022-03-14

摘要: 近年来,深度传感器和三维激光扫描仪的普及推动了三维点云处理方法的快速发 展。针对传统的前后端分离的点云分割模式,提出了一种使用移动端设备进行三维数据采集与处理的一体化技术方案。基于谷歌的 ARCore开发平台,进行了安卓设备上的深度图获取实验,深度图可进一步转换为点云数据;通过对模型轻量化方法的研究,改进了PointNet网络,使 模型参数量减少为原来的1/5,同时具有约73%的分割精度;最后利用TensorFlowLite移动端深度学习框架,将改进的PointNet网络成功部署到了安卓智能手机上,量化后的tflite模型仅268 kB大小,在启用 GPU加速后,对单幅场景点云数据的推断速度约为 0.7s。实验结果表明了提出方法的可行性。

关键词: 点云分割, 深度图获取, 深度学习框架

中图分类号: 

  • TP391