博客
关于我
3D Object Detection with Pointformer
阅读量:579 次
发布时间:2019-03-09

本文共 977 字,大约阅读时间需要 3 分钟。

没错!Transformer的"魔爪"已经伸向3D目标检测了。

Pointformer:用于3D点云的特征学习backbone,可结合并提高现有的3D点云目标检测网络性能,如VoteNet、PointRCNN和CBGS等。

注:文末附【Transformer】和【3D目标检测】学习交流群

Transformer最近在3D点云方向应用的工作可以看一下:

Pointformer

3D Object Detection with Pointformer

在这里插入图片描述

  • 作者单位:清华大学(黄高团队), 亚马逊Alexa AI等
  • 论文:https://arxiv.org/abs/2012.11409

由于3D点云数据的不规则性,从点云进行3D目标检测的特征学习非常具有挑战性。

在本文中,我们提出了Pointformer,这是专为3D点云设计的Transformer backbone,可以有效地学习特征。

在这里插入图片描述

具体而言,采用Local Transformer模块对局部区域中的点之间的交互进行建模,从而在对象级别学习上下文相关的区域特征。Global Transformer旨在学习场景级别的上下文感知表示。

为了进一步捕获多尺度表示之间的依赖关系,我们提出了“Local-Global Transformer”,以将局部特征与高分辨率的全局特征集成在一起。此外,我们引入了一个有效的坐标优化模块,以将向下采样的点移动到更靠近对象质心的位置,从而改善了对象proposal的生成。

在这里插入图片描述

Local Transformer

在这里插入图片描述

主要贡献:

在这里插入图片描述

实验结果

我们将Pointformer用作最新目标检测模型的基础,并在室内和室外数据集上展示了优于原始模型的重大改进。

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述
在这里插入图片描述

Transformer交流群

已建立CVer-Transformer微信交流群!想要进Transformer学习交流群的同学,可以直接加微信号:CVer5555。加的时候备注一下:Transformer+学校+昵称,即可。然后就可以拉你进群了。

3D目标检测交流群

建了CVer-目标检测交流群!想要进检测学习交流群的同学,可以直接加微信号:CVer5555。加的时候备注一下:3D目标检测+学校+昵称,即可。然后就可以拉你进群了。

强烈推荐大家关注CVer知乎账号和CVer微信公众号,可以快速了解到最新优质的CV论文。

在这里插入图片描述

转载地址:http://kkwsz.baihongyu.com/

你可能感兴趣的文章
Netty 编解码器详解
查看>>
Netty 解决TCP粘包/半包使用
查看>>
Netty 调用,效率这么低还用啥?
查看>>
Netty+Protostuff实现单机压测秒级接收35万个对象实践经验分享
查看>>
Netty+SpringBoot+FastDFS+Html5实现聊天App详解(一)
查看>>
netty--helloword程序
查看>>
Netty5.x 和3.x、4.x的区别及注意事项(官方翻译)
查看>>
netty——Channl的常用方法、ChannelFuture、CloseFuture
查看>>
netty——Future和Promise的使用 线程间的通信
查看>>
Vue输出HTML
查看>>
netty——黏包半包的解决方案、滑动窗口的概念
查看>>
Netty中Http客户端、服务端的编解码器
查看>>
Netty中使用WebSocket实现服务端与客户端的长连接通信发送消息
查看>>
Netty中实现多客户端连接与通信-以实现聊天室群聊功能为例(附代码下载)
查看>>
Netty中的组件是怎么交互的?
查看>>
Netty中集成Protobuf实现Java对象数据传递
查看>>
netty之 定长数据流处理数据粘包问题
查看>>
Netty事件注册机制深入解析
查看>>
netty代理
查看>>
Netty入门使用
查看>>