就这？吴恩达熬夜手写‘大模型学习笔记‘也就让我月薪涨3k

Python_金钱豹

墨衍会员 · AI 创作全网分发码龄5年

关注

原创 2024-05-06 19:54:29 1.1k 阅读 AI 写同款· GEO 优化 ›

deeplearning.ai吴恩达大模型微调课程笔记系统的介绍为什么要对大模型进行微调，微调与提示词的区别，如何对大模型微调，以及如何对大模型评估。阅读详情

吴恩达讲prompt

关键原则
- 原则一:清晰明确的指令
- 原则二:给模型时间思考
- 局限性
迭代提示词
总结文本
推断
转换文本
扩写
聊天机器人

关键原则

原则一:清晰明确的指令

1.使用符号、标点等等对输入的不同部分进行分割，比如将“待处理文本“和“提示词“进行分割。

2.结构化输出。要求模型将结果以结构化形式输出，比如将书名、编号、作者、类型以json格式输出。

3.如果任务具有假设条件，要求模型检查假设是否满足，可以减少幻觉发生。比如给出一段描述泡茶步骤的文本，在prompt可以加入一段“如果文本中不包含一系列步骤，则返回"为提供步骤”。

4.少样本提示(few-shot prompting)。执行任务前，给模型一个成功的例子····

原则二:给模型时间思考

1.指定完成任务的所有步骤。对于复杂任务，给出完成任务的步骤。

2.要求模型在得出结论前先给出自己的解决方案，并比较所给方案的正确性。比如一道题目和答案，可以让模型先自己做，再比较自己的答案和所给答案的正确性，而不是让模型直接判断所给答案的正确性。

局限性

1.幻觉。模型会编造看起来真实的回答

一个减少幻觉的方法是让模型注明回答的引用信息，根据既有的资料来回答问题。

迭代提示词

refine the idea, refine the prompt, and go around thisloop multiple times until you end up with a prompt thatworks for your application.

e.g.:1. 根据所给信息，为线上家具商家写一段家具营销描述。

2.(返回结果太长了)，于是让模型最多使用50词

3.(由于营销面向的是家居零售商)，希望模型更加详细地描述其技术细节。

4.(希望包含产品id)要求模型在结尾给出产品id。

迭代提示词

提炼想法，提炼提示，并多次循环，直到得到适用于应用程序的提示。

e.g:1.根据所给信息，为线上家具商家写一段家具营销描述。

2.(返回结果太长了)，于是让模型最多使用50词:

3.(由于营销面向的是家居零售商)，希望模型更加详细地描述其技术细节。

4.(希望包含产品id)，要求模型在结尾给出产品id。

总结:

1.首先根据前面所给的两大原则进行第一次尝试。
2.分析回答的哪些方面不够理想。
3.进一步完善指令，给模型更多时间思考。

总结文本

1.限制字数。

2.明确总结的目的。比如对于一段消费者评论，作为商家，可以提示模型总结的目的是帮助物流部分优化，这样模型输出结果会更关注产品物流。

3.同时总结多条文本。

推断

在这里插入图片描述

如何学习大模型 AI ？

由于新岗位的生产效率，要优于被取代岗位的生产效率，所以实际上整个社会的生产效率是提升的。

但是具体到个人，只能说是：

“最先掌握AI的人，将会比较晚掌握AI的人有竞争优势”。

这句话，放在计算机、互联网、移动互联网的开局时期，都是一样的道理。

我在一线互联网企业工作十余年里，指导过不少同行后辈。帮助很多人得到了学习和成长。

我意识到有很多经验和知识值得分享给大家，也可以通过我们的能力和经验解答大家在人工智能学习中的很多困惑，所以在工作繁忙的情况下还是坚持各种整理和分享。但苦于知识传播途径有限，很多互联网行业朋友无法获得正确的资料得到学习提升，故此将并将重要的AI大模型资料包括AI大模型入门学习思维导图、精品AI大模型学习书籍手册、视频教程、实战学习等录播视频免费分享出来。

在这里插入图片描述