Jiesonshan-优快云博客

fold函数将一种格式的输入数据转化成另外一种格式并返回；fold, foldLeft和foldRight这三个函数做的事情差不多仅有一点点不同。下文解释它们的共同点并解释它们的不同点。　　举一个简单的例子，用fold计算一系列整型的和。 valnumbers=List(5,4,8,6,2) numbers.fold(0) { (z, i) => ...

2019-08-06 14:56:13 794

原创 XGBoost的spark版编译部署 linux

XGBoost的spark版编译部署(Linux)源码下载 git clone --recursive https://github.com/dmlc/xgboost 编译安装 cd xgboost; make -j4maven安装jar包到本地mvn仓mvn install:install-file -Dfile=./xgboost4j-0.8-SNAPS

2018-02-04 09:40:37 3606

转载 TensorFlow中的Nan值的陷阱

转自http://blog.sina.com.cn/s/blog_6ca0f5eb0102wr4j.html；如果涉及到版权请博主联系删除之前在TensorFlow中实现不同的神经网络，作为新手，发现经常会出现计算的loss中，出现Nan值的情况，总的来说，TensorFlow中出现Nan值的情况有两种，一种是在loss中计算后得到了Nan值，另一种是在更新网络权重等等数据的时候出现了Na

2017-11-16 21:49:50 2279

原创针对Apache Spark logging within scala 出现的 Task not serializable

Exception in thread "main" org.apache.spark.SparkException: Task not serializable -> Caused by: java.io.NotSerializableException: org.apache.log4j.Logger@transient lazy val log = Logger.getLogge

2017-08-19 10:02:48 464

原创 Maven编译打包spark（2.1.0）源码及出现问题的解决方案（win7+Intellij IDEA）

Maven编译打包spark（2.1.0）源码及出现问题的解决方案（win7+Intellij IDEA）编译spark源码进行二次开发，中间出现的问题及解决方法

2017-08-05 10:10:44 9237 1

原创 Spark+Scala+intellij在win7下开发环境配置

spark在win7下的环境配置

2017-08-05 09:01:58 4208

翻译 Ubuntu16.10 下codeblocks的安装配置

初次使用ubuntu，各种编译环境还不熟悉，特意写下配置环境到过程。打开终端输入：sudo add-apt-repository ppa:damien-moore/codeblocks-stablesudo apt-get updatesudo apt-get install codeblocks codeblocks-contribc/c++编译器安装一

2017-06-15 15:07:43 313

翻译 ubuntu16.10 下opencv2.4.13安装配置

第一次在ubuntu系统下配置opencv，中间走了不少弯路，浪费了不少时间，一度想把ubuntu系统版本改成14.04，现在把安装过程记录下来，希望对需要的人有所帮助。1. 安装gcc/g++ 基本的编译器 sudo apt-get install build-essential2. 安装依赖库 sudo apt-get install cmake libgtk2.

2017-06-15 09:27:42 448

原创 Tensorboard在windows系统下的使用方法

Tensorboard在win7下的启动：（pip安装的TensorFlow，基于python） 1、打开cmd命令窗口 2、进入到Python安装目录Python35（根据自己的情况） 3、键入命令tensorboard --logdir=path(生成的Tensorboard文件所在路径）

2017-03-22 19:04:20 4186 1

转载神经网络的前向传播和误差反向传播（NN，RNN，LSTM）（三）

本文转载自：http://blog.youkuaiyun.com/u011414416/article/details/46694877 转载请注明原文出处

2016-11-27 21:36:37 803

转载神经网络的前向传播和误差反向传播（NN，RNN，LSTM）（二）

本文转自：http://blog.youkuaiyun.com/u011414416/article/details/46694877 ，

2016-11-27 21:33:57 1506

转载神经网络的前向传播和误差反向传播（NN，RNN，LSTM）（一）

本文转自转载请注明出处：http://blog.youkuaiyun.com/u011414416/article/details/46694877本文将简要介绍神经网络（Neural Network，NN）的相关公式及推导。

2016-11-27 21:30:25 1320

转载 theano入门学习

theano入门学习原文地址：http://blog.youkuaiyun.com/hjimce/article/details/46806923作者:hjimce本篇博文主要是在我刚入门学theano的一个学习历程的回顾，记录了自己深度学习学习征程的第一站。一、初识theano1、theano.tensor常用数据类型学习theano，首先要学的就是t

2016-11-15 20:40:36 361

转载 Theano.scan() 来自http://blog.sina.com.cn/s/blog_6553da670102wi98.html

theano.scan()result,updates = theano.scan(fn = lambda y, p, x_2, x_1,A: y+p+x_2+x_1+A, sequences=[Y, P], outputs_info=[dict(initial=X, taps=[-2, -1])]), non_sequences=A，no_steps=n)参数fn是一个你需要计算的函

2016-10-26 16:45:53 408