卷积神经网络学习路线十四 | CVPR 2017 ResNeXt（ResNet进化版）

- 日理万妓 2023-06-29 11:00 19阅读 0赞

# 前言 #

传统的卷积神经网络在提高性能时都是加深和加宽网络，但随着超参数数量的增加(如通道数，卷积核大小等)网络变得非常难调，且网络的计算开销和网络结构设计也变得越来越难，这一点我在介绍ResNet和DenseNet大型模型的时候已经提到过了。此外这些大模型针对性比较强，即在特定数据集上表现好的网络放到新数据集上就需要修改很多的参数才能工作良好，因此可扩展性比较一般。针对上述问题，Saining Xie, Ross Girshick, Kaiming He在CVPR2017上提出了ResNeXt。论文原文地址见附录。

# 贡献 #

*  网络结构更加简单和模块化。
 *  大量减少了需要手动调节的超参数，扩展性更强。
 *  和ResNet相比，相同的参数个数，结果更好。具体来说，一个101层的ResNeXt 网络，和 200 层的 ResNet 准确度差不多，但是计算量只有后者的一半。

# 方法 #

## 网络结构 ##

ResNeXt的网络结构如Table1所示：

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2p1c3Rfc29ydA_size_16_color_FFFFFF_t_70]  
Table 1的左边网络为ResNet-50，Table 1的右边网络为ResNeXt-50，括号代表残差块，括号外面的数字代表残差块的堆叠次数，而 C C C代表的ResNeXt引入的卷积分组数，同时我们可以看到这两个网络的FLOPs基本一致，也即是说模型复杂度一致。那ResNeXt有什么优点呢？这要先从分组来说起。

## ResNeXt残差模块 ##

分组数在论文中又被称为基数(cardinality)，是对GoogleNet中分立合并思想和VGG/ResNet中堆叠思想的一种结合，ResNet的残差模块和ResNeXt的残差模块如Figure1所示。可以看到ResNeXt残差模块有32个基数(分组数)，并且每个被聚合的拓扑结构就完全一样，这里是 1 × 1 + 3 × 3 + 1 × 1 1\\times 1 + 3\\times 3 + 1 \\times 1 1×1\+3×3\+1×1的组件，这也是和Inception结构的最大区别。

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2p1c3Rfc29ydA_size_16_color_FFFFFF_t_70 1]  
然后论文从理论角度来分析了一下这个ResNeXt残差模块，用全连接层举例来讲，全连接层的公式可以表示为：

![在这里插入图片描述][20200112204642175.png]

然后Figure2就清晰的展示了全连接层分离变化合并(`split-transform-merge`)的处理过程：

![在这里插入图片描述][20200112204422130.png]  
而ResNeXt残差模块实际上就是将其中的 w i x i w\_ix\_i wixi替换成了更一般的函数，用公式表示如下：

![在这里插入图片描述][20200112204628937.png]  
其中 C C C就是上一节提到的分组数/基数，而 T i ( x ) T\_i(x) Ti(x)代表的是相同的拓扑结构，在Figure1中就是`1x1+3x3+1x1`卷积堆叠。

## 等价模式 ##

而Figure1中de ResNeXt残差模块有两种等价的模型，如Figure3所示。其中Figure3（a）前面已经讲过了。而Figure3（b）表示的是使用了两层卷积后concat，然后再卷积，比较类似于Inception-ResNet。Figure3（c）使用的是原始的组卷积，这个大家都比较熟悉了。论文指出这三种结构是完全等价的，并且最后做出来的实验结果完全一样，而在实验部分展示的是Figure3（c）的结果，因为Figure3（c）的结构比较简洁并且速度更快。

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2p1c3Rfc29ydA_size_16_color_FFFFFF_t_70 2]

## 模型容量 ##

下面的Table2说明了Figure1左右两个结构即ResNet结构和ResNeXt结构的参数量差不多，其中第二行的 d d d表示每个路径的中间channel数量，而第三行代表整个模块的宽度，是第一行 C C C和第二行 d d d的乘积。关于这两个模型容量也就是FLOPs的计算就不再赘述了，感兴趣去看一下公式(4)，我大概贴一下。

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2p1c3Rfc29ydA_size_16_color_FFFFFF_t_70 3]  
FLOPS计算公式如下，可以看到FLOPS基本相等。

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2p1c3Rfc29ydA_size_16_color_FFFFFF_t_70 4]

# 实验 #

在实验中ResNeXt相比于ResNet区别仅仅是其中的block，其他都不变，作者的实验结果如Figure5所示。可以看到相同层数的ResNet和ResNeXt的对比：

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2p1c3Rfc29ydA_size_16_color_FFFFFF_t_70 5]

其中， 32 × 4 d 32\\times 4d 32×4d表示的是有32个相同的路径，然后每个路径的宽度都为 4 4 4，即如Figure3展示的那样。可以看到ResNeXt和ResNet的参数复杂度差不多，但是其训练误差和测试误差都降低了。

ResNet和ResNeXt在ImageNet上的对比结果如Table3所示：

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2p1c3Rfc29ydA_size_16_color_FFFFFF_t_70 6]  
另外一个重要的实验结果如Table4所示，主要说明了增加基数/分组数和增加宽度和深度的区别。第一个是基准模型，增加深度和宽度分别是第三，第四个，可以看到Top1误差分别降低了0.3%和0.7%。同时第五个加倍了分组数Top1误差降低了1.3%，第六个则把分组数加到了64，Top1误差降低了1.6。由此可以看出，增加分组数比增加深度或宽度会更加有效。

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2p1c3Rfc29ydA_size_16_color_FFFFFF_t_70 7]

# 结论 #

ResNeXt这篇论文提出了使用一种平行堆叠相同拓扑结构的残差模块来代替原始的残差模块，在不明显增加参数量的同时提升了模型的准确率，同时由于拓扑结构相同，需要自己调的超参数也减少因此更便于模型的扩展和移值。

# 附录 #

*  论文原文：https://arxiv.org/pdf/1611.05431.pdf
 *  参考博客：https://blog.csdn.net/hejin\_some/article/details/80743818

# 推荐阅读 #

*  [快2020年了，你还在为深度学习调参而烦恼吗？][2020]
 *  [卷积神经网络学习路线（一）| 卷积神经网络的组件以及卷积层是如何在图像中起作用的？][Link 1]
 *  [卷积神经网络学习路线（二）| 卷积层有哪些参数及常用卷积核类型盘点？][Link 2]
 *  [卷积神经网络学习路线（三）| 盘点不同类型的池化层、1\*1卷积的作用和卷积核是否一定越大越好？][_1_1]
 *  [卷积神经网络学习路线（四）| 如何减少卷积层计算量，使用宽卷积的好处及转置卷积中的棋盘效应？][Link 3]
 *  [卷积神经网络学习路线（五）| 卷积神经网络参数设置，提高泛化能力？][Link 4]
 *  [卷积神经网络学习路线（六）| 经典网络回顾之LeNet][_LeNet]
 *  [卷积神经网络学习路线（七）| 经典网络回顾之AlexNet][_AlexNet]
 *  [卷积神经网络学习路线（八）| 经典网络回顾之ZFNet和VGGNet][_ZFNet_VGGNet]
 *  [卷积神经网络学习路线（九）| 经典网络回顾之GoogLeNet系列][_GoogLeNet]
 *  [卷积神经网络学习路线（十）| 里程碑式创新的ResNet][_ResNet]
 *  [卷积神经网络学习路线（十一）| Stochastic Depth（随机深度网络）][Stochastic Depth]
 *  [卷积神经网络学习路线（十二）| 继往开来的DenseNet][_DenseNet]
 *  [卷积神经网络学习路线（十三）| CVPR2017 Deep Pyramidal Residual Networks][CVPR2017 Deep Pyramidal Residual Networks]

--------------------

欢迎关注GiantPandaCV, 在这里你将看到独家的深度学习分享，坚持原创，每天分享我们学习到的新鲜知识。( • ̀ω•́ )✧

有对文章相关的问题，或者想要加入交流群，欢迎添加BBuf微信：

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2p1c3Rfc29ydA_size_16_color_FFFFFF_t_70 8]

[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2p1c3Rfc29ydA_size_16_color_FFFFFF_t_70]: https://img-blog.csdnimg.cn/20200112200834728.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2p1c3Rfc29ydA==,size_16,color_FFFFFF,t_70
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2p1c3Rfc29ydA_size_16_color_FFFFFF_t_70 1]: https://img-blog.csdnimg.cn/20200112202351223.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2p1c3Rfc29ydA==,size_16,color_FFFFFF,t_70
[20200112204642175.png]: https://img-blog.csdnimg.cn/20200112204642175.png
[20200112204422130.png]: https://img-blog.csdnimg.cn/20200112204422130.png
[20200112204628937.png]: https://img-blog.csdnimg.cn/20200112204628937.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2p1c3Rfc29ydA_size_16_color_FFFFFF_t_70 2]: https://img-blog.csdnimg.cn/20200112203137756.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2p1c3Rfc29ydA==,size_16,color_FFFFFF,t_70
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2p1c3Rfc29ydA_size_16_color_FFFFFF_t_70 3]: https://img-blog.csdnimg.cn/20200112210631190.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2p1c3Rfc29ydA==,size_16,color_FFFFFF,t_70
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2p1c3Rfc29ydA_size_16_color_FFFFFF_t_70 4]: https://img-blog.csdnimg.cn/20200112210814868.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2p1c3Rfc29ydA==,size_16,color_FFFFFF,t_70
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2p1c3Rfc29ydA_size_16_color_FFFFFF_t_70 5]: https://img-blog.csdnimg.cn/20200112211241187.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2p1c3Rfc29ydA==,size_16,color_FFFFFF,t_70
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2p1c3Rfc29ydA_size_16_color_FFFFFF_t_70 6]: https://img-blog.csdnimg.cn/20200112212019244.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2p1c3Rfc29ydA==,size_16,color_FFFFFF,t_70
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2p1c3Rfc29ydA_size_16_color_FFFFFF_t_70 7]: https://img-blog.csdnimg.cn/20200112211953975.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2p1c3Rfc29ydA==,size_16,color_FFFFFF,t_70
[2020]: https://mp.weixin.qq.com/s/WU-21QtSlUKqyuH6Bw1IYg
[Link 1]: https://mp.weixin.qq.com/s/MxYjW02rWfRKPMwez02wFA
[Link 2]: https://mp.weixin.qq.com/s/I2BTot_BbmR4xcArpo4mbQ
[_1_1]: https://mp.weixin.qq.com/s/bxJmHnqV46avOttAFhk28A
[Link 3]: https://mp.weixin.qq.com/s/Cv68oXVdB6pg_4Q_vd_9eQ
[Link 4]: https://mp.weixin.qq.com/s/RwG1aEL2j6G-MAQRy-BEDw
[_LeNet]: https://mp.weixin.qq.com/s/oqX9h1amyalfMlHmxEg76A
[_AlexNet]: https://mp.weixin.qq.com/s/4nTRYbIZOLcMdqYpRpui6A
[_ZFNet_VGGNet]: https://mp.weixin.qq.com/s/0hQhG4Gg5AjpBUR6poVz-Q
[_GoogLeNet]: https://mp.weixin.qq.com/s/mXhVMHBsxrQQf_MV4_7iaw
[_ResNet]: https://mp.weixin.qq.com/s/op1ERa4GIlcbCgxFRsENdw
[Stochastic Depth]: https://mp.weixin.qq.com/s/3mndBm86qamoy4Gn5mBLfA
[_DenseNet]: https://mp.weixin.qq.com/s/UP_OhkKiIwTSgkrqcEvL5g
[CVPR2017 Deep Pyramidal Residual Networks]: https://mp.weixin.qq.com/s/CdNgtBaUIBKuzCpbxy1PXw
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2p1c3Rfc29ydA_size_16_color_FFFFFF_t_70 8]: https://img-blog.csdnimg.cn/20200110234905879.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2p1c3Rfc29ydA==,size_16,color_FFFFFF,t_70

发表评论取消回复

表情：

评论列表（有 0 条评论，19人围观）

还没有评论，来说两句吧...

相关阅读

相关卷积神经网络学习路线（二十三）| 经典网络回顾之XceptionNet

> Xception: Deep Learning with Depthwise Separable Convolutions 1.前言卷积神经网络学习路线这个系列旨

忘是亡心i/ 2023年07月20日 05:54/ 0 赞/ 35 阅读

相关卷积神经网络学习路线（二十二）| Google Brain EfficientNet

1. 前言这是卷积神经网络学习路线的的第二十二篇文章，要介绍的是2019年Google Brain的大作EfficientNet，论文全名为EfficientNet：R

逃离我推掉我的手/ 2023年07月09日 14:27/ 0 赞/ 173 阅读

相关卷积神经网络学习路线（十五） | NIPS 2017 Dual Path Network（ResNeXt+DensetNet结合版）

前言前面已经讲了ResNet，ResNeXt，以及DenseNet，讲解的原文都可以在文后找到。今天要介绍的DPN（双路网络）是2017年由颜水成老师提出的，作者的简介

ゝ一世哀愁。/ 2023年06月30日 02:48/ 0 赞/ 74 阅读

相关卷积神经网络学习路线十四 | CVPR 2017 ResNeXt（ResNet进化版）

前言传统的卷积神经网络在提高性能时都是加深和加宽网络，但随着超参数数量的增加(如通道数，卷积核大小等)网络变得非常难调，且网络的计算开销和网络结构设计也变得越来越难，这

- 日理万妓/ 2023年06月29日 11:00/ 0 赞/ 20 阅读

相关卷积神经网络学习路线（十一）| Stochastic Depth（随机深度网络）

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ub

拼搏现实的明天。/ 2023年06月27日 08:47/ 0 赞/ 87 阅读

相关卷积神经网络学习路线（十）| 里程碑式创新的ResNet

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ub

本是古典何须时尚/ 2023年06月27日 06:07/ 0 赞/ 89 阅读

相关卷积神经网络学习路线（七）| 经典网络回顾之AlexNet

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ub

短命女/ 2023年06月24日 13:27/ 0 赞/ 58 阅读

相关卷积神经网络学习路线（六）| 经典网络回顾之LeNet

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ub

小鱼儿/ 2023年06月23日 11:56/ 0 赞/ 235 阅读

相关卷积神经网络学习路线（五）| 卷积神经网络参数设置，提高泛化能力？

前言这是卷积神经网络学习路线的第五篇文章，主要为大家介绍一下卷积神经网络的参数设置，调参技巧以及被广泛应用在了哪些领域，希望可以帮助到大家。卷积神经网络的参数设置

ゝ一纸荒年。/ 2023年06月21日 12:25/ 0 赞/ 95 阅读

相关计算机视觉的研究热点卷积神经网络,基于卷积神经网络的单图像去雨(CVPR2018&CVPR2017)...

图像去雨是图像处理和计算机视觉领域共同关心的重要问题，传统的关于图像去雨的图像恢复方法在某些特定的情况下会失效，鉴于深度卷积神经网络(CNN)在计算机视觉领域的迅猛发展及其良好

我就是我/ 2022年10月10日 11:18/ 0 赞/ 115 阅读