weixin_43331421的博客

近年来，随着计算机技术和大数据的快速发展，深度学习在各个领域取得了显著的成果，如自然语言处理，图片生成，工业数字化等。为了提高模型的性能，研究者们不断尝试增加模型的参数数量，从而诞生了大模型这一概念。大模型源于深度学习领域，特别是自然语言处理（NLP）的进展。自2018年Google发布Transformer架构以来，预训练模型如BERT、GPT系列迅速崛起，标志着NLP进入大规模模型时代。