少样本学习2:Revisiting Local Descriptor based Image-to-Class Measure for Few-shot Learning

本文探讨了如何利用Local Descriptor改进Few-shot Learning,通过Image2Class度量减少样本不足带来的噪声影响。作者从Naive Bayes Nearest Neighbors (NBNN)获取灵感,使用全卷积网络生成的Deep Local Feature,避免池化操作,以非参数的分类器进行训练。实验表明,Image2Class度量提高了模型性能,并对比了不同shot数量和度量方式的效果。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

前言

发表信息:2019CVPR
文章链接:https://arxiv.org/abs/1903.12290
代码链接:https://github.com/WenbinLee/DN4

鉴于已有相关博文对这篇文章进行分析:https://blog.youkuaiyun.com/qq_36104364/article/details/106479996
我补充一些自己的阅读感受。

一、核心思想

作者开门见山指出自己收到NBNN(Naive Bayes Nearest Neighbors)的启发,通过将传统metric-based 方法中Image2Image的度量表示修改成Image2Class的度量表示,有效减少了在小样本场景下由于样本量不足带来的噪声( intra-class variation or background clutter)导致得到的度量不够准确。
整体框架图
Deep Local Feature: 给定一张图片,作者通过全卷积网络得到 h * w * d 大小的特征图,作者放弃使用池化操作,而是将该特征图视为每一个空间位置上都输出一个特征向量,用于后续分类。
什么

当前提供的引用内容并未涉及论文《Revisiting Text-to-Image Evaluation with Gecko: On Metrics, Prompts, and Human Ratings》的相关信息。因此无法基于已有引用完成对该论文的具体总结。 然而,可以提供一些关于该主题的一般性背景知识以及可能的研究方向: ### 论文概述 《Revisiting Text-to-Image Evaluation with Gecko: On Metrics, Prompts, and Human Ratings》主要探讨了文本到图像生成模型评估中的关键问题。具体而言,研究聚焦于以下几个方面: 1. **评价指标**:传统自动化的评价指标(如FID、CLIPScore等)是否能够充分反映生成图像的质量和多样性[^6]。 2. **提示工程**:不同的文本描述如何影响生成图像的效果及其质量评估[^7]。 3. **人类评分**:引入人类主观判断作为补充手段,验证自动化指标的有效性和局限性[^8]。 通过提出一种新的综合框架Gecko,作者试图建立更全面且可靠的评测体系来衡量文本转图片技术的进步程度。 以下是部分实现代码用于计算某些常见视觉相似度分数的例子: ```python from sklearn.metrics.pairwise import cosine_similarity def compute_clip_score(image_features, text_features): """ Computes CLIP Score between image features and corresponding text features. Parameters: image_features (numpy.ndarray): Array of shape (n_samples, n_dimensions). text_features (numpy.ndarray): Array of shape (n_samples, n_dimensions). Returns: float: Average Cosine Similarity score across all samples. """ scores = [] for img_feat, txt_feat in zip(image_features, text_features): sim = cosine_similarity([img_feat], [txt_feat]) scores.append(sim.item()) avg_score = sum(scores)/len(scores) return avg_score ``` 此函数展示了如何利用余弦距离测量两张嵌入空间内的向量之间的接近程度。
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值