lyn0503的博客

目前正在结合机器学习理论学习MLlib源码 前言 在学习大数据之前，先要了解他解决了什么问题，能给我们带来什么价值。一方面，以前IT行业发展没有那么快，系统的应用也不完善，数据库足够支撑业务系统。但是随着行业的发展，系统运行的时间越来越长，搜集到的数据也越来越多，传统的数据库已经不能支撑全量数据的存储工作；另一方面，数据越来越多，单机的计算已经成为瓶颈。因此，基于分布式的大数据系统崭露头角。那...

本文hadoop的版本为hadoop-2.2.0 一、安装java jdk 1、下载java jdk1.7版本，放在/home/software目录下， 2解压：tar -zxvf java-jdk*****.jar 3、vim /etc/profile 1 2 3 4 5 #在文件最后添加 expo...

Hadoop安装 1.创建hadoop用户组; $sudo addgrouphadoop 记下这里为hadoop用户设置的密码，后面使用hadoop用户登录时需要用到。 2.创建hadoop用户; $sudo adduser -ingroup hadoop hadoop 3.给hadoop用户添加权限，打开/etc/sudoers文件; $su...