- 博客(5)
- 收藏
- 关注
原创 自然语言处理评估指标
perplexity = e**(sum(losses) / num_tokenized_tokens),遵循深度学习框架中的最新约定。
2023-08-28 12:48:31
1406
原创 transformer、pytorch系列相关
我们来看看huggingface中的map是如何工作的,首先我定义了一个增加前缀的函数,然后再map里面调用该函数,然后打印出来看看,这个函数操作的结果,所有数据的fact这个值,都被增加了一个前缀。shuffle函数在上一节已经看到了,shuffle的功能是打乱datasets中的数据,其中seed是设置打乱的参数,如果设置打乱的seed是相同的,那我们就可以得到一个完全相同的打乱结果,这样用相同的打乱结果才能重复的进行模型试验。如果是选择None,默认也是None,就会返回所有的python对象。
2023-04-24 14:16:53
200
2
原创 python相关函数介绍
Python 解释器内置了很多函数和类型,任何时候都能使用。以下按字母顺序给出列表。内置函数Aabs()aiter()all()any()anext()ascii()Bbin()bool()breakpoint()bytearray()bytes()Ccallable()chr()classmethod()compile()complex()Ddelattr()dict()dir()divmod()Eenumerate()eval()exec()Ffilter()float()format()fr
2022-06-25 18:04:54
303
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人