达摩院创新三维算法，论文成果入选顶会CVPR 2022
|
把3D地图压缩放进手机，需要几步？ 近日，达摩院提出新的三维定位地图压缩算法，在保证视觉定位精度的前提下将地图压缩250多倍，使之可存储于手机等端侧设备。 相关论文已被计算机视觉顶会CVPR 2022收录。 3D视觉定位是沉浸式互联网的核心技术之一。标准的3D视觉定位方法需提前构建特定场景的3D地图，使之可与相机拍摄的2D图片进行特征点匹配，以计算用户的位置和姿态。 但3D地图体量巨大，对存储空间需求较高，无法部署在内存和带宽有限的手机等移动设备。 业界对3D地图的轻量化做了诸多探索，在前人工作基础上，达摩院XR实验室提出新方法SceneSqueezer，将3D地图压缩250倍以上，并使精度损失控制在较小范围，实现模型大小和定位精度的平衡。 SceneSqueezer采用分层策略对3D地图进行压缩 根据论文SceneSqueezer: Learning to Compress Scene for Camera Relocalization，达摩院团队采用分层策略对3D地图进行压缩： 首先利用成对的共可见性信息对数据库图像进行聚类，将场景划分为多个集群分别压缩； 其次，基于最终的位姿估计精度，学习选择每个图片的特征点； 最后通过特征量化方法压缩特征点的描述。 该算法在Cambridge Landmarks、Aachen Day-Night等室外场景数据集上取得了优于既有方法的表现。 达摩院XR实验室在杭州文三街开发的“AR打卡”项目 达摩院XR实验室自研三维算法体系，在建图、定位等核心技术模块屡有突破，今年已有多篇论文入选顶会： Quadtree Attention for Vision Transformer提出四叉树注意力机制，提升了基于视觉任务的Transformer模型的性能，入选深度学习顶会ICLR 2022； Neural Window Fully-connected CRFs for Monocular Depth Estimation提出单相机深度估计算法，利用消费级全景相机就可完成深度估计任务，大大降低三维建图成本，文章被CVPR 2022录用。 目前，达摩院XR实验室研发的AR、VR技术已落地跨境电商、数字城区等多个场景，如为杭州文三数字生活街区建造1:1还原的三维“数字孪生体”，为杭州奥体中心10万平米地下停车场开发AR导航服务等。 |
全部评论
暂无评论
最新文章
热点排行
-
1文件存储 NAS 和 对象存储 OSS 的区别
-
2天翼云云电脑 | 让电视一秒变身电脑
-
3阿里工程师太凶残了，竟把服务器泡在“水里”！
-
4腾讯云 | 想在微信群里发起9人以上的语音聊天怎么办？
-
5数据仓库终结者：Dremio
-
62020年云服务器哪家强：阿里云、腾讯云、华为云、UCloud测评报告
-
72020 年 Q1 中国云市场份额：阿里云第一、华为云跃居第二、腾讯云下降为第三
-
8阿里云 web 应用防火墙(WAF)价格：179元/年
-
92020 Q1 中国公有云市场份额 TOP3：阿里云、腾讯云、华为云
-
10郑大一附院系统瘫痪 2 小时，运维人员被判 5 年半：破坏计算机信息系统罪
有话要说