深度检索模型
概述
该部分用于基于上下文信息实现语境对称检索和语境非对称检索。
名词解释
语境检索semantic search指的是结合上下文语境信息的检索。
关于对称检索和非对称检索在文章SGPT: GPT Sentence Embeddings for Semantic Search中有如下解释:

简而言之对称检索指的是query与doc的结构和语义相似,找到与query最相关的若干doc;
非对称检索指的是query与doc结构与语义差异较大,找到与query最相关的若干doc。
动机
预训练语言模型可以更好的理解和利用语义信息,与传统的词嵌入方法不同,预训练模型是contextual(上下文敏感、全局的)的,并且基于大规模预料训练的模型可以更好的总结语言习惯。
之所以使用深度学习的方法进行结果检索是因为我们希望进一步使用问题query 的上下文信息,从而达到更理想的检索效果。
语境对称检索
该人物的目的是实现query与前序query相关度的计算,从而辅助交互系统判断是否开启一个新的检索任务。
语境非对称检索
该部分用于计算上下文信息与文段的相关度,实现基于上下文对普通检索结果的重排序。
本文探讨了深度检索模型在语境对称和非对称检索中的应用。语境检索利用上下文信息提高搜索准确性。对称检索关注query与doc的结构和语义相似性,而非对称检索则处理结构和语义差异大的情况。预训练语言模型因其上下文敏感性和大规模训练的优势,被用来提升检索效果。语境对称检索用于计算query间的相关性,辅助交互系统判断检索任务切换;而语境非对称检索则用于重排序检索结果,增强上下文相关性。
911

被折叠的 条评论
为什么被折叠?



