Hellen2020的博客

神经卷积网络 https://www.bilibili.com/video/BV1Ht411g7Ef?p=21 大部分patterns比image小，一个neuron不需要看整张图就可以去发现pattern 同样的patterns会出现在不同部分，不需要训练好几个detector,让neuron共用同一组参数 一个image做subsampling不会有太大影响，所以可以把image减小 一个CNN Image->convolution->max pooling->convolution

学习来源：https://www.bilibili.com/video/BV1JA411c7VT?p=8 神经网络训练 原因：training loss updates -not small enough(参数loss 为0，gradient is close to zero（loss 不下降卡在crtical point->有没有办法知道是卡在local minima(无路可走) 还是 saddle point（有路可走）) 判断方法：线性代数 泰勒展开式 Optimization with

定义一个function Goodness of function Pick the best function Deeper usually does not imply better Vanishing gradient problem Input 改参数对output 变化很小导致small gradient 改进：做linear unit(ReLU) Reason: Fast to compute Biological reason Infinite sigmoid with different

梯度下降 gradient descent 学习资料来源：https://www.bilibili.com/video/BV1Ht411g7Ef?p=6 深度学习训练算法都是以梯度下降算法及其改进算法为核心的，训练的最终目的是使损失函数最小。沿着梯度下降方向更新变量，找到函数最小值 Set the learning rate η carefully,调的太大就飞出去，太小时间过长没效果 Adaptive learning rates 基本方法:reduce the learning rate by som

误差 estimator Error: 1）靶心没有瞄准：bias有偏移 2）瞄准位置但有偏移：variance有偏移 不同宇宙的f* 不一样 设y=b+w* xcp 简单的model（small variance,large bias）受到data的影响小(分布小，但靶心有差距) 较复杂的model(small bias，large variance)每次的f*都不太一样，但平均下来在靶心附近 Bias E [f * ]=- f,if we average all the f *,is it

task0-1机器学习介绍 视频学习资源来自：https://www.bilibili.com/video/BV1Ht411g7Ef?p=2&share_source=copy_web 机器学习：让机器有学习的能力 机器学习不需要人工设定各种规则，是通过大量的数据发现规则。 机器学习三步骤： 1.一个function set（model)-> 2.判断一个function 好还是坏<-(training data) |_->3.选择最好的function ‘f’->(tes

练习题1 CREATE TABLE shop.employee(id int not null); alter table shop.employee add column name varchar(45) null; alter table shop.employee add column salary float null; alter table shop.employee add column departmentid int not null; insert

5.1 窗口函数 5.1.1 窗口函数概念及基本的使用方法 窗口函数也称为OLAP函数。OLAP 是OnLine AnalyticalProcessing 的简称，意思是对数据库数据进行实时分析处理。 常规的SELECT语句都是对整张表进行查询，而窗口函数可以让我们有选择的去某一部分数据进行汇总、计算和排序。 窗口函数的通用形式： <窗口函数> OVER ([PARTITION BY <列名>] ORDER BY <排序用列名>)

4.1.1 表的加法–UNION SELECT product_id, product_name FROM product UNION SELECT product_id, product_name FROM product2; UNION 等集合运算符通常都会除去重复的记录. 对于同一张表, 也是可以进行求并集的. 4.1.1.2 UNION 与 OR 谓词 对于同一个表的两个不同的筛选结果集, 使用 UNION 对两个结果集取并集, 和把两个子查询的筛选条件用 OR 谓词连接, 会得到相同的