论文解读《M5Product: Self-harmonized Contrastive Learning for E-commercial Multi-modal Pretraining》

系列文章目录



1、 L M i ( θ ) = − E t m s k ∼ t   l o g P θ ( t m s k ∣ t ¬ m s k , M ¬ i ) \mathcal{L}_{M_{i}}(\theta)=-E_{t_{m s k}\sim\mathrm{t~}}logP_{\theta}\left(t_{m s k}\mid t_{\neg m s k},\mathbf{M}_{\neg i}\right) LMi(θ)=Etmskt logPθ(tmskt¬msk,M¬i) 什么意思

含义分解

  1. 自监督学习背景

    • 该公式用于自监督学习中的损失函数,特别是在 Joint Co-Transformer (JCT) 模块中,针对不同模态(如图像、文本、表格、视频和音频)进行特征学习。
  2. 期望值

    • E t m
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值