李宏毅机器学习/深度学习概述

目录

WHAT

HOW

Supervised Learning

Self-supervised Learning

Unsupervised Learning

Generative Adversarial Network（GAN） 生成式对抗网络

Reinforcement Learning（RL）

BEYOND

Anomaly Detection异常检测

Explainable AI

Model Attack

Domain Adaptation领域自适应

Network Compresion网络压缩

Life-long Learning终身学习

Meta Learning元学习

---

WHAT

Look for Function，用机器的力量把函数找出来

函数应用举例

本课程集中在机器学习中的深度学习：机器要找一个函数，这个函数是类神经网络

• 输入：可以是向量、矩阵（影像图片）、序列（文本、语音）
• 输出：可以是数值、类别（分类）、文本图片

不同的输入和输出

HOW

Supervised Learning

利用Training Data先行训练

Self-supervised Learning

在训练之前练到一些基本功

Unsupervised Learning

Generative Adversarial Network（GAN） 生成式对抗网络

只需要收集大量x和y，不需要之间成对的关系，机器可以自动找出关系

生成对抗网络

Reinforcement Learning（RL）

不知道如何标注资料，但可以定义什么是更优

BEYOND

Anomaly Detection异常检测

让机器具备能够回答“我不知道”的能力

Explainable AI

不仅要告诉我们是什么，还要告诉我们为什么这样

Model Attack

Domain Adaptation领域自适应

训练集为黑白 检测彩色效果暴跌

Network Compresion网络压缩

• 减少模型大小和计算成本的技术

Life-long Learning终身学习

• 使模型能够在不断变化的环境中持续学习新知识，同时保持旧知识

Meta Learning元学习

• 学习如何学习，训练模型快速适应新任务的能力