Felaim的博客

Attention is All You Need

Spearman’s rank correlation coefficient的简单理解1. 背景在统计学中，斯皮尔曼等级相关系数（Spearman’s rank correlation coefficient， 或者Spearman’s ρ\rhoρ， 通常使用ρ\rhoρ或者rsr_srs​来表示），是一个等级相关性的非参数度量（两个变量等级之间的统计相关性）。这个相关系数使用单调函数来描述两个变量之间的关系程度。如果两个变量的Spearman correlation和Pearson correl

Pearson correlation coefficient 的简单理解1. 背景最近LZ正在恶补一些nlp相关的知识，其中在判断句子文本相似性的时候，使用了Pearson correlation和Spearman’s rank correlation这两个统计学相关系数，还是做个笔记吧，不然时间久了，又会忘记了。在统计学中，皮尔逊相关系数（Pearson correlation coefficient, PCC）,有的时候也指Pearson’s r, 皮尔逊剂矩相关系数 （Pearson pr

Paper Reading: STS-B1. 引言论文全名为：SemEval-2017 Task 1: Semantic Textual SimilarityMultilingual and Cross-lingual Focused EvaluationSTS是什么？Semantic Textual Similarity (STS) ，用来表示句子意义的相似性。主要有哪些应用呢？包括机器翻译（machine translation， MT）,总结归纳（summarization），生成（gene

Paper Reading: GLUE1. 引言最近看论文，突然脑子中蹦出了这么一个感觉，看论文是不应该先把论文看厚了，然后再把论文看薄了，这论文也就懂了O(∩_∩)O这篇论文是在看BERT的时候，里面有一个GLUE score的评价指标，因为刚开始接触NLP,算是NLP的小白吧，所以还是有很多要理解和学习的知识。进入正题，GLUE是什么？General Language Understanding Evaluation(GLUE) benchmark,用于评估各种现有不同的natural lang

transformer ： Quick tour1. 使用pipeline开始一个任务1.1 transformer的pipeline提供的任务类型情感分析：文本是积极的还是消极的文本生成（英语）：给定一个提示，模型会生成对应的内容名称实体识别（Name Entity Recognition, NER）:输入一个句子，将每个单词标记为其表示的实体（如人，地点等）问题解答：为模型提供一些上下文和问题，并从上下文中提取答案填充被屏蔽的文本：给定带有被屏蔽词的文本（例如，用[ma