4 个月前

深度神经网络中的聚合残差变换

深度神经网络中的聚合残差变换

摘要

我们提出了一种简单且高度模块化的图像分类网络架构。该网络通过重复一个构建模块来构建,该模块聚合了一组具有相同拓扑结构的变换。我们的简单设计导致了一个只有少数超参数需要设置的均匀多分支架构。这一策略揭示了一个新的维度,我们称之为“基数”(cardinality)(变换集的大小),除了深度和宽度这两个维度之外,它也是一个关键因素。在ImageNet-1K数据集上,我们通过实验证明,即使在保持复杂度不变的条件下,增加基数也能提高分类准确性。此外,当增加模型容量时,增加基数比加深或加宽网络更为有效。我们所提出的模型命名为ResNeXt,在ILSVRC 2016分类任务中获得了第二名的成绩。我们进一步在ImageNet-5K数据集和COCO检测数据集上研究了ResNeXt,结果同样优于其对应的ResNet模型。代码和模型已在线公开提供。

代码仓库

TuSimple/resnet.mxnet
tf
GitHub 中提及
cjf8899/Pytorch_ResNeXt
pytorch
GitHub 中提及
Sakib1263/1DResNet-KERAS
tf
GitHub 中提及
facebookresearch/pycls
pytorch
GitHub 中提及
mlvccn/bmtc_transferattackvid
pytorch
GitHub 中提及
intsco/am-segmentation
pytorch
GitHub 中提及
hsd1503/resnet1d
pytorch
GitHub 中提及
kobiso/CBAM-tensorflow-slim
tf
GitHub 中提及
D-X-Y/ResNeXt-DenseNet
pytorch
GitHub 中提及
hustic/TinyImageSet
pytorch
GitHub 中提及
facebookresearch/ResNeXt
官方
pytorch
GitHub 中提及
IMvision12/keras-vision-models
pytorch
GitHub 中提及
JianGoForIt/YellowFin_Pytorch
pytorch
GitHub 中提及
zhaoqyu/ResNeXt-MGE
pytorch
GitHub 中提及
osmr/imgclsmob
mxnet
GitHub 中提及
kobiso/CBAM-tensorflow
tf
GitHub 中提及
Duplums/bhb10k-dl-benchmark
pytorch
GitHub 中提及
Deci-AI/super-gradients
pytorch
GitHub 中提及
open-edge-platform/geti
pytorch
GitHub 中提及
developer0hye/SKNet-PyTorch
pytorch
GitHub 中提及
wwwuyijia/mindspore_models-ResNeXt50
mindspore
GitHub 中提及
prlz77/ResNeXt.pytorch
pytorch
GitHub 中提及

基准测试

基准方法指标
domain-generalization-on-vizwizResNeXt-101 32x16d
Accuracy - All Images: 51.7
Accuracy - Clean Images: 54.8
Accuracy - Corrupted Images: 48.1
image-classification-on-gashissdbResNeXt-50-32x4d
Accuracy: 98.59
F1-Score: 99.25
Precision: 99.94
image-classification-on-imagenetResNeXt-101 64x4
GFLOPs: 31.5
Number of params: 83.6M
Top 1 Accuracy: 80.9%
Top 5 Accuracy: 94.7

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供