- 博客(13)
- 收藏
- 关注
原创 梯度下降方法
梯度下降法简介 梯度下降法是最小化目标函数J(θ)J(\theta)的一种方法,旨在降低真实值和预测值之间的误差,其中θ∈Rd\theta \in \mathbb{R}^{d}为模型参数。梯度下降法利用目标函数计算参数梯度ΔθJ(θ)\Delta_{\theta}J(\theta)的反方向更新参数。学习率η\eta (learning rate)决定达到最小值或者局部最小值过程中所采用的的步长大
2017-12-25 17:50:59
575
原创 多层感知机 Multi-Layer Perception Tensorflow实现
Multi-Layer Perception,多层感知机多层感知机(MLP)可以被看作是一个逻辑回归分类器,其输入数据首先使用已学习的非线性变换Φ\Phi进行转换。把输入数据映射到一个线性可分空间里。这个中间层被称为隐藏层。单隐藏层的多层感知机足以成为通用逼近器。使用许多这样的隐藏层有利于我们构建功能强大的模型,这也是深度学习的核心思想。 具有单隐藏层的多层感知机(MLP)或人工神经网络 (ANN
2017-11-19 14:11:02
3699
原创 Logistic Regression 逻辑回归,Tensorflow源码实现
Logistic Regression 逻辑回归Logistic Regression是一种基于概率的线性分类器。它由一个权重矩阵WW和偏差向量bb参数组成。逻辑回归将输入向量投影到一组超平面,每个超平面代表着一个分类。输入向量到超平面的距离反映了此向量属于超平面对应分类的概率。 在数学上,输入向量xx属于类别ii,即随机变量YY的值概率PP,定义如下: P(Y=i|x,W,b)=softmax
2017-11-16 11:42:19
834
原创 概率分布
概率分布总结一些广泛使用的概率分布的性质。对于每个概率分布,列出一些关键的统计性质,例如期望E[x]E[x]、方差(或者是协方差)、众数、熵H[x]H[x]。所有这些分布都是指数族的成员,被广泛用作更高级的概率模型的基本模块。伯努利分布 这是单一二元变量的x∈{0,1}x\in\{0,1\}的分布。例如,抛硬币的结果。它是由一个连续参数μ∈[0,1]\mu\in[0,1]控制,这个参数表示x=1
2016-12-05 17:39:59
491
原创 去噪自动编码机
去噪自动编码机(Denoising Autoencoder)自动编码机的主要作用是数据降维,提取特征。 原始输入xx 经过加权 (W,b)(W,b),映射函数(如:非线性函数Sigmoid)之后得到yy,在对yy反向加权映射回来成为zz。通过反复迭代两组(W,b)(W,b),使得误差函数最小,即尽可能保证zz近似于xx,即完美重构了xx.自动编码器,它没有使用数据标签来计算误差update参数,所
2016-12-04 20:26:39
1831
原创 自动编码机
自动编码机(Autodencoder)自动编码机(Autoencoder)属于非监督学习,不需要对训练样本进行标记。自动编码机(Autoencoder)由三层网络组成,其中输入层神经元数量与输出层神经元数量相等,中间层神经元数量少于输入层和输出层。在网络训练期间,对每个训练样本,经过网络会在输出层产生一个新的信号,网络学习的目的就是使输出信号与输入信号尽量相似。自动编码机(Autoencoder)
2016-12-04 16:48:13
10398
原创 NFS Gateway Error
Cloudera NFS Gateway Error : Cannot connect to port 111. 解决办法出现这种问题的原因可能是 rpcbind 停止了服务;解决办法:systemctl status rpcbind.service # Check status of rpcbindsystemctl start rpcbind.service # Start rpcbindsy
2016-07-22 18:45:16
654
原创 Vmware vSphere client手动更改mac地址
VMware Vsphere client 手动更改mac地址点击虚拟机编辑设置,选中硬件一栏,网络适配器1,MAC地址选择手动。配置参数,选择添加参数 ethernetN.checkMACAddress = “false” ,把N改成0即可。
2016-07-21 19:43:02
3701
原创 Hbase数据迁移
HBase 数据迁移方案(集群互通)Export and Import 方法(1) 在旧集群上把hbase数据库中的表导出。 使用:hbase org.apache.hadoop.hbase.mapreduce.Export HbaseTable hdfs://newclusteriP:8020/user/data/HbaseTable. 其中HbaseTable 是hbase数据表名。把Hbas
2016-07-16 11:20:15
1255
原创 linux挂载windows文件夹
Linux 挂载 windows共享文件在windows系统上新建share文件夹,设置共享属性在Linux文件系统 /mnt/目录下新建public文件夹在Linux系统中执行命令 : mount -t cifs //windowsip/share /mnt/public -o username=”windows用户名”
2016-07-07 21:13:45
277
原创 cluster
Hadoop 集群搭建本文描述了如何安装、配置、和管理有实际意义的Hadoop集群,其规模可从几个节点的小集群到几千节点的超大集群。安装安装Hadoop集群通常要将安装软件解压到集群内的所有机器上。通常,集群里的一台机器被指定为 NameNode,另一台不同的机器被指定为JobTracker。这些机器是masters。余下的机器即作为DataNode也作为TaskTracker。这些机器是slave
2015-06-28 10:27:24
391
原创 Ubuntu下安装thrift同时由Hbase.thrift生成hbase文件
1.首先下载thrift (版本为thrift-0.9.1) 网址为 http://www.apache.org/dyn/closer.cgi?path=/# #thrift/0.9.1/thrift-0.9.1.tar.gz 2.安装依赖 sudo apt-get install build-essential sudo apt-get
2015-03-21 10:43:14
360
原创 vsphere cluster 构建
vsphere 集群的构建的详细步骤本篇文章主要讲述了 vmware vsphere 集群的构建。从服务器安装vmware esxi 系统开始,然后在一台服务器建一台虚拟机,在新建的虚拟机上安装Window 2008 server r2 或windows 7,8等操作系统。在windows server 操作系统上安装vaware vsphere vServer 。1 . 安装ESXI系统
2015-03-18 20:26:27
771
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人