\u200E
室内 3D 点云场景物体分割与检测
发布日期:2021-09-10T12:59:41.000+0000 浏览量:3859次

案例简介

在公安现勘领域,通常现勘专家需要在勘察后回到办公室凭借回忆和 2D 照片绘制现场 CAD 草图,通常绘制出的图 纸不准确,且需要花费专家半天到一天的时间,非常枯燥且浪费时间。3D 视觉作为一门新兴技术,通过 3D 摄像头 能够采集视野内空间每个点位的三维座标信息,通过算法复原智能获取三维立体成像,非常适合解决这一类问题。

 

page100image24843760

                                                原始室内场景点云采集                                                                                 犯罪现场 CAD 草图

 

螳螂慧视科技有限公司应用飞桨深度学习开源平台,针对客户提出的室内 3D 点云场景物体分割与检测需求进行开 发,通过高精度手持扫描仪将犯罪现场扫描下来,之后借助 AI 技术帮助刑侦专家一键转化出现场 CAD 草图,兼具 速度和精度优势,将过去一天的工作缩短到 10 分钟以内完成,大大提升工作效率,节省人力成本。

 

技术方案

 

 

基于 PointNet++

 

点云分割输出结果

 

输出CAD图

 

Bad Case

  • 柜子和门容易被分割成墙体类别。
  • 杂物多的地方,分割效果不佳。
  • 基于规则的转化算法鲁棒性不佳,在复杂场景下几乎不可用。

 

 

使用 3D 物体检测网络代替分割网络,直接回归物体的位姿和类别

 

系统架构图

 

page101image24781760
 

 

上线效果

 

 

page102image24812240
 
 
 
page102image24806624
 

 

案例企业简介

螳螂慧视作为以色列 Mantis Vision 在大中华区的合资子公司,正式成立于 2018 年,中国团队传承了以色列的尖端 技术与知识积累,在国内自主研发了一系列 3D 设备,同时还凭借中国团队深厚的企业数字化业务背景,在多个专 业领域中服务国内客户创新使用 3D 技术。基于技术优势,螳螂慧视的产品可以高自由度的整合,以适用于多种场 景如手机、机器人视觉、金融支付、空间还原、AR 电商、体积测量、AR/ VR 内容制作等。