[点云补全]-Point Cloud Completion by Skip-attention Network with Hierarchical Folding-程序员宅基地

Point Cloud Completion by Skip-attention Network with Hierarchical Folding

CVPR 2020
利用多级Folding结构和skip-attention来进行点云补齐
Folding结构是之前就有的，本文主要是利用skip-attention将folding结构堆叠起来，更加深了，有点像受到了ResNet和DeepGCNs的启发。

摘要

原文	译文
Point cloud completion aims to infer the complete geometries for missing regions of 3D objects from incomplete ones.	点云补齐的目的是从不完整的点云推断出缺失部分的几何形状
Previous methods usually predict the complete point cloud based on the global shape representation extracted from the incomplete input.	之前的方法通常是从不完整点云的全局形状特征预测完整的点云
However, the global representation often suffers from the information loss of structure details on local regions of incomplete point cloud.	存在的问题在于，从不完整点云中获取的全局特征缺少局部细节结构。
To address this problem, we propose Skip-Attention Network (SA-Net) for 3D point cloud completion. Our main contributions lie in the following two-folds.	本文提出了SA-Net，有2个创新点
First, we propose a skip-attention mechanism to effectively exploit the local structure details of incomplete point clouds during the inference of missing parts. The skip-attention mechanism selectively conveys geometric information from the local regions of in-complete point clouds for the generation of complete ones at different resolutions, where the skip-attention reveals the completion process in an interpretable way.	首先，skip-attention机制可以有效的捕捉缺失部分的局部结构细节特征，并且skip-attention可以有选择的在不同的分别率下强调确实部分的几何特征，同时skip-attention在点云补全过程是一种可解释性的。
Second, in order to fully utilize the selected geometric information encoded by skip-attention mechanism at different resolutions, we propose a novel structure-preserving decoder with hierarchical folding for complete shape generation. The hierarchical folding preserves the structure of complete point cloud generated in upper layer by progressively detailing the local regions, using the skip-attentioned geometry at the same resolution.	第二点，为了充分利用skip-attention得到的重点选择的几何信息，本文提出一种保留结构的decoder，多层folding结构逐步对局部区域细节化。
We conduct comprehensive experiments on ShapeNet and KITTI datasets, which demonstrate that the proposed SA-Net outperforms the state-of-the-art point cloud completion methods.	在ShapeNet和KITTI上做了补全对比的实验。

Folding Block的 self-attention

Floding Block的结构图如下
在这里插入图片描述
图中左下角就是self-attention的结构，这是一个很常见的点云self-attention结构。
通过两个MLP:h和l将输入特征变换到一个维度，然后转置相乘，再softmax归一化得到attention score/weight

然后再利用一个MLP:g 乘以得到的权重，最后利用一个残差结构加上最初的特征得到self-attention后的特征。
在这里插入图片描述

Skip-attention

skip-attention是本文的亮点创新。它将encoder得到的特征加权地变成decoder的输入，将encoder和decoder联系了起来，之前pointnet++进行semantic segmentation的时候都是直接把encoder的特征skip concatenate到decoder的输入。
作者阐述的skip-attention的作用：

当生成的点在不完整的点区域内时，skip-attention可以帮助decoder更好的恢复特征
当生成的点不在完整点云的区域内时，skip-attention查找已有点云的相似区域，然后利用已知相似点来恢复未知点。

示意图
在这里插入图片描述
作者给出了两种skip-attention的实现方式，第一种和上面的一样，用MLP来实现。
第二种时计算特征之前的余弦相似性作为attention score

实验

Effect of attention

为了验证attention的作用，作者做了下面3个对比实验

No-skip
Skip-L
Fold-C

得到的结果是Skip-Attention用Cossine，Fold-Attention用Learned方式最好。

Visualization of skip-attention

在这里插入图片描述

skip attention扩展

最后，作者还把本文的skip-attention拓展到semantic segmentation和unsurpervised shape classification，都取得了improvement.

本文链接：https://blog.csdn.net/alfred_torres/article/details/107514079

原作者删帖不实内容删帖广告或垃圾文章投诉

智能推荐

Linux 手动挂载虚拟硬盘-程序员宅基地

Linux下新硬盘必须：分区+格式化+挂载才能使用，window系统自动识别1.手动添加一个虚拟硬盘，硬盘类型推荐默认（scsi）2.使用磁盘分区fdisk命令动态添加，删除，转换分区。格式为：fdisk 【磁盘名称】注：物理设备的命名规则：SCSI/SATA/U盘文件系统名称规则为：/dev/sd(a-p)3.分区：Linux中规定，每一个硬盘..._手动挂载硬盘

PyQt5实战之二维码生成器（一）：基本界面设计_pyqt5 toolbox-程序员宅基地

前言本实战项目为构建一个桌面应用，功能是定制二维码，实现多种数据类型的嵌入，和二维码样式的多样化。涉及知识点：基于 PyQt5 的界面构建和功能实现（包括标签、按钮、文本框、滑块、选项卡、工具箱、菜单栏、状态栏等控件），界面国际化（文字英汉互译），基于qrcode和myqr库定制二维码（颜色、logo、背景图）,用 qrc 文件管理打包资源。阅读前应具备 Python 基础和对 PyQt5 库的入门知识（可见 PyQt5初学试验记录系列文章）。文章目录一、打包后的工具使用效果预览1、生成普通二维_pyqt5 toolbox

rssi室内定位算法原理_基于RSSI测距的室内定位算法研究-程序员宅基地

摘要：近年来,随着无线传感器网络的迅速发展,室内定位技术在诸多领域中得到了广泛应用,成为重要的研究对象之一.室内定位技术的核心要素是定位算法.优秀的定位算法,可以有效地降低无线信道的影响,并利用较少的网络资源获取较高的定位精度.论文在研究了基于RSSI测距的无线定位算法后,针对两种算法的缺点提出了优化方案. 针对线性化定位算法需要至少五个参考节点才能真正实现有效的定位的缺点,提出了利用泰勒级数展开..._rssi测距定位的缺点

javaScript自动补全-程序员宅基地

欢迎技术交流。 QQ：138986722 自动提示文本框首先离不开文本框本身、而提示框则采用块内嵌项目列表来实现。当前用户在文本框中每输入一个字符(onkeyup事件)时就在预定的"颜色名称集(功能很小很小)"中查找、找到匹配的项就动态加载到中、显示给用户选择、HTML代码如下： Color:

STM32F103C8T6芯片 Keil5工程JLINK设置-程序员宅基地

C8T6应当是LQFP48封装的64k内部FLASH的MCU，但是在使用中发现，我们是可以对超过64K字节的FLASH空间进行读写的，而且MDK默认的下载算法也是针对128KFLASH的，Flash描述符设置如下：如果不设置上面步骤的Flash，下载时会报如下错误：cannot load flash device description！...

error: cannot connect to daemon: cannot connect to 127.0.0.1:5037 解决办法-程序员宅基地

总结：error: cannot connect to daemon: cannot connect to 127.0.0.1:5037 解决办法关闭windows防火墙_127.0.0.1:5037