Attention for Image Registration(AiR)笔记

什么是Image Registration

图像配准(Image registration)就是将不同时间、不同传感器（成像设备）或不同条件下（天候、照度、摄像位置和角度等）获取的两幅或多幅图像进行匹配、叠加的过程。举个例子来说就是在医学上机器如果要检查一个人的肺部，那机器可能只有一个标准状态下肺部的模型，而人的肺部会因为呼吸而不断扩张与收缩，那机器怎么去识别出这个人的肺部哪一块是哪一块呢，这就需要用到图像配准，将变形的图像和标准图像进行匹配。再比如说已知脑部结构的正面图，怎么将一张侧面图与正面的结构相对应上呢，这也需要图像配准。

本论文做了什么

将attention机制引入到图像配准中，大概呢就是先将原图片进行划分，划分成许多小块之后，就类似于attention在自然语言处理中的一样，将这些小块进行编码，将这些编码送入到编码器中，经过attention也就是通过Q*K，并通过归一化等一系列操作后（具体可看attention那篇论文），得到的值乘以V，全部相加起来就得到一个特征向量Z，该向量就对应了划分的某一个小块的特征。之后将这些特征向量送入解码器中，而运动图像也经过划分小块之后以同样的方式进入解码器中，在解码器中使用ma