1. 2 voxel representation 1.2.1 Voxelization 步骤 在3D目标检测中,对整个场景的point2voxel的过程可以简单描述为如下: 1.设置Voxelization 1.2.2 Voxelization 参数 上文中的体素化过程涉及到两个重要的内容,一个是体素参数,另外一个是voxel特征根据该voxel中的特征如何求取。 Voxelization对参数的要求比较高,就发展历史来说,VoxelNet(CVPR18)是第一篇采用voxel-representation作为点云输入的网络结构,该文章中max_points_number 下图左图表示的是点的voxel表示,经过Voxelization化后,经过逐步下采样的encoder过程降为二维 feature map,最后再根据二维的feature的每一个像素点作为anchor point
Dataset/Algorithm/Model/Experiment Detail 模型结构如下图: 首先点云voxelization,这一步文章利用了GPU进行优化,提高了速度。
· 新增 2 个 3D 检测算子 spconv 和 non-deterministic voxelization。 · 优化 NMS 算子的计算效率。
specular and transparent object surface reconstruction [HPG13] Real-time high-resolution sparse voxelization
different categories have different anchors, which corresponds to different regression targets. c)体素(Voxelization
Nevertheless, the downside is that voxelization often causes loss of precise position information. 3.
设置Voxelization参数(每个voxel可以存放点的个数(max_points_number),voxel长宽高的大小(whl)) 2. 计算voxel特征 为了方便理解笔者做了一个简单的示意,如下下图的过程则是Voxelization的过程,如果max_points_number设置为3,那么红色点如果是比较后加入到对应的voxel,那么就会被丢弃 backbone 小结 上面介绍了两种按照先后顺序发展起来的backbone方法,其中3D CNN和voxel特征提取中提到的MLP特征提取相配合(因为但是3D CNN还没有稀疏卷积表达形式,所以考虑到显存消耗,在voxelization
图3 dynamic voxelization计算流程 如图2所示为multi-view feature fusion的流程,融合了3部分特征:bev feature(如图中绿色部分)、camera/ 提出了使用动态voxel(dynamic voxelization,DV)的方式获得bev图,计算过程如图3所示,相对传统的voxel(Hard voxelization,HV),有3个好处,1)DV保留了
图2 KITTI测试集上的速度-精度对比图,其中O为HVNet 1 研究背景 在当前点云检测模块,格网化(voxelization)是一个重要的方式。
本文的目标是设计一种轻量级,计算效率高(computationally-efficient)、内存占用少(memory-efficient)的网络结构,并且能够直接处理大规模3D点云,而不需要诸如voxelization
其具体做法是首先将相邻若干帧激光雷达扫描得到的点云转换到同一坐标系下,把每一帧的点云进行体素化 (voxelization);同时为了避免在单帧上使用3D卷积及其所引入的计算复杂度,将高度这一维作为通道
图 2 KITTI测试集上的速度-精度对比图,其中O为HVNet 研究背景 在当前点云检测模块,格网化(voxelization)是一个重要的方式。
2、 Smoothed density value (SDV) voxelization(平滑密度值(SDV)体素化) 3、 Network architecture(网络构架)
We propose anovel deep net architecture that consumes raw point cloud (set of points)without voxelization
utils/移动到mmdet3d/testing/ (#2012) 给 models/layers/ 文件夹下代码增加 typehint (#2014) 精修文档 (#1891, #1994) 改进 voxelization
所以后续大家都用voxelization(Voxel)的方法把所有CAD model转成binary voxel模式(有值为1, 空缺为0)这样保证了每个模型都是相同的大小。
所以后续大家都用voxelization(Voxel)的方法把所有CAD model转成binary voxel模式(有值为1, 空缺为0)这样保证了每个模型都是相同的大小。
6% on CIFAR-10 and 2% on MVTAD. 【4】 DV-Det: Efficient 3D Point Cloud Object Detection with Dynamic Voxelization To achieve this goal, we propose dynamic voxelization, a method that voxellizes points at local scale For further speed optimization, we propose the grid-based downsampling and voxelization method, and provide 点云|SLAM|雷达|激光|深度RGBD相关(1篇) 【1】 CKConv: Learning Feature Voxelization for Point Cloud Analysis 标题:CKConv By learning feature voxelization with LSA, CKConv can extract enriched features for effective point cloud
执行点到体素分配/映射的方式有三种:固定体素化(fixed voxelization)、动态体素化(dynamic voxelization)和混合比例体素化(hybrid scale voxelization
本文的目标是设计一种轻量级,计算效率高(computationally-efficient)、内存占用少(memory-efficient)的网络结构,并且能够直接处理大规模3D点云,而不需要诸如voxelization