扩散模型网络

torch.nn.ELU

【PyTorch】教程：torch.nn.ELU_黄金旺铺的博客-优快云博客

torch.nn函数解析_nn.elu_AutoGalaxy的博客-优快云博客

TensorFlow基础篇（四）—— tf.nn.relu()

TensorFlow基础篇（四）—— tf.nn.relu()_nn.relu tensorflow_ooMelloo的博客-优快云博客

torch.nn.LeakyReLU()

【Pytorch】torch.nn.LeakyReLU()_海轰Pro的博客-优快云博客

torch.nn.SiLU()

【PyTorch】教程：torch.nn.SiLU_nn.silu()_黄金旺铺的博客-优快云博客

pytorch之torch.nn.Conv2d()函数详解

pytorch之torch.nn.Conv2d()函数详解_夏普通的博客-优快云博客

kernel_size：卷积核大小，=1则是1x1卷积核，=3则是3x3卷积核

1x1大小的卷积核现在主要被用来执行通道的变换和维度的降低。

常见的卷积操作（标准卷积、1*1卷积、深度可分离卷积、转置卷积、空洞卷积）

常见的卷积操作（标准卷积、1*1卷积、深度可分离卷积、转置卷积、空洞卷积） - 哔哩哔哩 (bilibili.com)