多模态知识图谱论文阅读笔记(二)AliMe MKG: A Multi-modal Knowledge Graph for Live-streaming E-commerce

介绍阿里淘宝推出的AliMeMKG多模态知识图谱,在原有基础上增加图片信息,实现图文匹配,并应用于直播助手等多个场景。

AliMe MKG: A Multi-modal Knowledge Graph for Live-streaming E-commerce

       这是阿里淘宝电商的一个多模态知识图谱,他没有上一篇文章Richpedia那样复杂,只是在原来的图谱基础上增加了图片,只有Richpedia中的第一种三元组(文本,hasimage,图片)。他没有图片文本之间复杂的关系,没有图片与图片之间复杂的关系。(个人认为就是一个图文匹配任务,选择合适的模型就好)
       首先要明确,AliMe构建图片多模态图谱的目的不是构建过程本身,而在于应用,这是跟Richpedia区别最大的地方之一,论文末尾介绍了阿里将他作为直播助手、问答系统等一系列应用。所以如果想要图谱落地,可以借鉴这种方法,如果是想从多模态图谱的构建入手,这篇论文就过于简单(当然本身这文章就写的很简单)。
在这里插入图片描述                             图片来自论文       本体

       根据论文的阐述,图谱中的图片都是从商品页面获取到的,每张图片会对应一些文本描述,这些描述应该是来自知识图普里的实体节点或者跟某些实体有关

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值