- 博客(5)
- 收藏
- 关注
原创 RT-DETR中的Encoder
进行残差相加和层归一化,残差相加是防止通过注意力计算之后得到的结果不如之前一开始输入的编码序列,也可以理解成与原来的序列相加之后各个像素的所有维度信息更加丰富了。这个向量每一行表示的这个时候每一行表示的不再是对于每一个像素的描述,而是一个像素与其他像素的关系,范围在0-1,并且每一行求和等于1。其实都是由原来输入的序列乘了不同的权重矩阵得到的,也就是只经过了线性变化,矩阵经过线性变化不会改变其本质。矩阵的每一行表示的还是原来序列的每一行,这里的每一行又表示的是之前特征图展平之后的每一个像素,所以进行。
2025-04-09 21:22:25
583
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人