利用跨模态 Transformer 进行多模态信息融合
目录1. 简介2. 创新点3. 模型描述3.1 Low Rank Fusion3.2 Multimodal Transformer具体模块介绍Temporal ConvolutionsPositional Embedding (PE)Crossmodal Attention (core)Crossmodal TransformersSelf-Attention Transformers and Prediction4. Experiment1. 简介前面文章提到基于张量低秩分解进行多模态的融合,今天介绍
原创
2020-12-28 15:30:08 ·
15886 阅读 ·
8 评论