
机器学习的下一步-课程笔记
tsstaitixu
yes
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
机器学习的下一步 笔记 -1 总览
知道“我不知道” -Anomaly Detection 解释为什么“我知道” - Explainable AI 恶意攻击 - Adversarial Attack 终身学习 - Life-long Learning 学习如何学习 - Meta Learning 增强学习 - Reinforcement Learning 神经网络压缩 Network Compression ...原创 2019-08-21 10:59:50 · 114 阅读 · 0 评论 -
Anomaly Detection
背景 定义:找出异常(与训练资料相异 的data) 应用:欺诈检测、网络入侵检测、癌症检测 与二分类的区别: 异常数据不能被简单视为一类 难以获取异常数据 带标签异常检测 训练一个分类器,将置信度(分类最高分or crossentropy)与threshold 比较。 threshold的设定取决于f(x)在Dev dataset 上的表现 不带标签异常检测 基于分布 得出数据分布p...原创 2019-08-21 14:43:33 · 298 阅读 · 0 评论 -
Adversarial Attack
Attack 尝试解释:在某个维度上,该类别的分布过于狭小陡峭,以至于稍微移动一点就到了别的不相关类别。 White-box attack loss func 对图片进行optimition,使得网络输出远离正确输出,接近指定输出(Targeted Attack)。在一定约束下(更改不要太明显以至被发现) constraint定义与实现 与原图片的距离函数,可选用l2-norm\L-infini...原创 2019-08-21 15:06:32 · 1468 阅读 · 0 评论 -
Life Long Learning
与其他方法区别 Muti-task Learning 每个任务的训练资料都需要囊括,且要训练每一个任务,对存储和计算资源的严峻挑战,可作为LLL的upper bound Transfer Learning 从任务A transfer 到任务B ,只要求在任务B上表现号即可,LLL要求在A、B上的表现都好 Evaluation 学了新的不忘旧 Constraint-based 加一个带守卫(...原创 2019-08-21 15:49:58 · 711 阅读 · 0 评论 -
Meta Learning
Meta LearningDefinition Definition 训练一个函数来指导主函数的训练(红框中的"超参") Loss func:所有test task的loss 之和 通常用于 N-ways K-shot Classification (N classes K samples) ...原创 2019-08-26 11:16:35 · 196 阅读 · 0 评论