在上一节的例子里，我们使用高宽为3的输入和高宽为2的卷积核得到高宽为2的输出。一般来说，假设输入形状是$n_h\times n_w$，卷积核窗口形状是$k_h\times k_w$，那么输出形状将会是
所以卷积层的输出形状由输入形状和卷积核形状决定。这一节我们将介绍卷积层的两个超参数，填充和步幅。它们可以对给定形状的输入和卷积核改变输出形状。
填充是指在输入高和宽的两侧填充元素（通常是0元素）。图5.2里我们在原输入宽和高的两侧分别添加了值为0的元素，使得输入高宽从3变成了5，并导致输出高宽由2增加到4。
一般来说，如果在高的两侧一共填充$p_h$行，在宽的两侧一共填充$p_w$列，那么输出形状将会是
也就是说输出的高宽分别会增加$p_h$和$p_w$。
通常我们会设置$p_h=k_h-1$和$p_w=k_w-1$使得输入和输出具有相同的高宽。这样会方便在构造网络时推测每个层的输出形状。假设这里$k_h$是奇数，我们会在高的两侧分别填充$p_h/2$行。如果$k_h$是偶数，一种可能是在输入的顶端一侧填充$\lceil p_h/2\rceil$行，而在底端一侧填充$\lfloor p_h/2\rfloor$行。这同样适用于在宽的两侧填充。
卷积神经网络经常使用奇数高宽的卷积核，例如1、3、5、和7，所以填充在两端上的数目相同。对任意的二维数组X，设它的第i行第j列的元素为X[i,j]。当填充在两端的数目相同，并使得输入和输出的高宽相同时，我们就知道输出Y[i,j]是由输入以X[i,j]为中心的窗口同卷积核进行互相关计算得到的。
下面例子里我们创建一个核高宽为3的二维卷积层，然后设输入高和宽两侧的填充数分别为1。给定一个高宽为8的输入，我们发现输出的高宽也是8。
from mxnet import nd
from mxnet.gluon import nn
# 定义一个便利函数来计算卷积层。它初始化卷积层权重，并对输入和输出做相应的升维和降维。
def comp_conv2d(conv2d, X):
conv2d.initialize()
# （1，1）代表批量大小和通道数（后面章节将介绍）均为 1。
X = X.reshape((1, 1) + X.shape)
Y = conv2d(X)
# 我们不关心前两维：批量和通道。
return Y.reshape(Y.shape[2:])
X = nd.random.uniform(shape=(8, 8))
# 注意这里是两侧分别填充 1 行或列，所以在两侧一共填充 2 行或列。
conv2d = nn.Conv2D(1, kernel_size=3, padding=1)
comp_conv2d(conv2d, X).shape
当卷积核的高和宽不同时，我们也可以通过设置高和宽上不同的填充数使输出和输入的高宽相同。
# 使用高为 5，宽为 3 的卷积核。在高和宽两侧的填充数分别为 2 和 1。
conv2d = nn.Conv2D(1, kernel_size=(5, 3), padding=(2, 1))
comp_conv2d(conv2d, X).shape
在上一节里我们介绍了二维互相关运算。卷积窗口从输入数组的最左和最上方开始，按从左往右、从上往下的顺序，依次在输入数组上滑动。我们将每次滑动的行数和列数称为步幅。
目前我们看到的例子里，在高和宽两个方向上步幅均为1。我们也可以使用更大步幅。图5.3展示了在高上步幅为3、在宽上步幅为2的二维互相关运算。可以看到，输出第一列第二个元素时，卷积窗口向下滑动了三行。而在输出第一行第二个元素时卷积窗口向右滑动了两列。当卷积窗口在输入上再向右滑动两列时，由于输入元素无法填满窗口，无结果输出。
一般来说，当高上步幅为$s_h$，宽上步幅为$s_w$时，输出形状为
如果我们设置$p_h=k_h-1$和$p_w=k_w-1$，那么输出形状将简化为$\lfloor(n_h+s_h-1)/s_h\rfloor \times \lfloor(n_w+s_w-1)/s_w\rfloor$。更进一步，如果输出高宽能分别被高宽上的步幅整除，那么输出形状将是$n_h/s_h \times n_w/s_w$。
下面我们令高和宽上的步幅均为2，从而使输入的高和宽减半。
conv2d = nn.Conv2D(1, kernel_size=3, padding=1, strides=2)
comp_conv2d(conv2d, X).shape
接下来是一个稍微复杂点的例子。
conv2d = nn.Conv2D(1, kernel_size=(3, 5), padding=(0, 1), strides=(3, 4))
comp_conv2d(conv2d, X).shape
为了表述简洁，当输入的高和宽两侧的填充数分别为$p_h$和$p_w$时，我们称填充为$(p_h, p_w)$。特别地，当$p_h = p_w = p$时，填充为$p$。当在高和宽上的步幅分别为$s_h$和$s_w$时，我们称步幅为$(s_h, s_w)$。特别地，当$s_h = s_w = s$时，步幅为$s$。
- 填充可以增加输出的高宽。这常用来使输出与输入同高宽。
- 步幅可以减小输出的高宽，例如输出高宽仅为输入高宽的$1/n$（$n$为大于1的整数）。
- 对本节最后一个例子通过形状计算公式来计算输出形状，看看是否和实验结果一致。
- 在本节实验中，试一试其他的填充和步幅组合。
扫码直达讨论区
