博客
关于我
3D Object Detection with Pointformer
阅读量:579 次
发布时间:2019-03-09

本文共 977 字,大约阅读时间需要 3 分钟。

没错!Transformer的"魔爪"已经伸向3D目标检测了。

Pointformer:用于3D点云的特征学习backbone,可结合并提高现有的3D点云目标检测网络性能,如VoteNet、PointRCNN和CBGS等。

注:文末附【Transformer】和【3D目标检测】学习交流群

Transformer最近在3D点云方向应用的工作可以看一下:

Pointformer

3D Object Detection with Pointformer

在这里插入图片描述

  • 作者单位:清华大学(黄高团队), 亚马逊Alexa AI等
  • 论文:https://arxiv.org/abs/2012.11409

由于3D点云数据的不规则性,从点云进行3D目标检测的特征学习非常具有挑战性。

在本文中,我们提出了Pointformer,这是专为3D点云设计的Transformer backbone,可以有效地学习特征。

在这里插入图片描述

具体而言,采用Local Transformer模块对局部区域中的点之间的交互进行建模,从而在对象级别学习上下文相关的区域特征。Global Transformer旨在学习场景级别的上下文感知表示。

为了进一步捕获多尺度表示之间的依赖关系,我们提出了“Local-Global Transformer”,以将局部特征与高分辨率的全局特征集成在一起。此外,我们引入了一个有效的坐标优化模块,以将向下采样的点移动到更靠近对象质心的位置,从而改善了对象proposal的生成。

在这里插入图片描述

Local Transformer

在这里插入图片描述

主要贡献:

在这里插入图片描述

实验结果

我们将Pointformer用作最新目标检测模型的基础,并在室内和室外数据集上展示了优于原始模型的重大改进。

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述
在这里插入图片描述

Transformer交流群

已建立CVer-Transformer微信交流群!想要进Transformer学习交流群的同学,可以直接加微信号:CVer5555。加的时候备注一下:Transformer+学校+昵称,即可。然后就可以拉你进群了。

3D目标检测交流群

建了CVer-目标检测交流群!想要进检测学习交流群的同学,可以直接加微信号:CVer5555。加的时候备注一下:3D目标检测+学校+昵称,即可。然后就可以拉你进群了。

强烈推荐大家关注CVer知乎账号和CVer微信公众号,可以快速了解到最新优质的CV论文。

在这里插入图片描述

转载地址:http://kkwsz.baihongyu.com/

你可能感兴趣的文章
Vue3.0中的响应式原理(第九课)
查看>>
NIO蔚来 面试——IP地址你了解多少?
查看>>
NISP一级,NISP二级报考说明,零基础入门到精通,收藏这篇就够了
查看>>
NISP国家信息安全水平考试,收藏这一篇就够了
查看>>
NIS服务器的配置过程
查看>>
NIS认证管理域中的用户
查看>>
Nitrux 3.8 发布!性能全面提升,带来非凡体验
查看>>
NiuShop开源商城系统 SQL注入漏洞复现
查看>>
NI笔试——大数加法
查看>>
NLog 自定义字段 写入 oracle
查看>>
NLog类库使用探索——详解配置
查看>>
NLP 基于kashgari和BERT实现中文命名实体识别(NER)
查看>>
NLP 时事和见解【2023】
查看>>
NLP 模型中的偏差和公平性检测
查看>>
Vue3.0 性能提升主要是通过哪几方面体现的?
查看>>
NLP 项目:维基百科文章爬虫和分类【01】 - 语料库阅读器
查看>>
NLP_什么是统计语言模型_条件概率的链式法则_n元统计语言模型_马尔科夫链_数据稀疏(出现了词库中没有的词)_统计语言模型的平滑策略---人工智能工作笔记0035
查看>>
NLP、CV 很难入门?IBM 数据科学家带你梳理
查看>>
NLP三大特征抽取器:CNN、RNN与Transformer全面解析
查看>>
NLP入门(六)pyltp的介绍与使用
查看>>