
大数据
文章平均质量分 85
linzheda
我有太多的东西想学,太多的地方想看,太多的经历觉得不能错过。但时光一年一年的过去,剩下的时间越来越少。我从来没有摆脱过责任感。我觉得大概是要对我自己负责,对我的才华负责,我渴望能充分利用我的才能和我自己
展开
-
python numpy基础
Numpy简单介绍1.Numpy是什么很简单,Numpy是Python的一个科学计算的库,提供了矩阵运算的功能,其一般与Scipy、matplotlib一起使用。其实,list已经提供了类似于矩阵的表示形式,不过numpy为我们提供了更多的函数。如果接触过matlab、scilab,那么numpy很好入手。 在以下的代码示例中,总是先导入了numpy:(通用做法import num转载 2017-12-10 11:08:39 · 335 阅读 · 0 评论 -
ubuntu上安装python
1.通过ubuntu官方的apt工具包安装sudo apt-get install python2.7 sudo apt-get install python3.4 2.从源代码编译安装pythontar -xzvf Python-2.7.9.tgz $ cd Python-2.7.9/ $./configure --prefix=/usr/python$ make $ sudo make...原创 2018-02-23 17:15:45 · 384 阅读 · 0 评论 -
ubuntu安装zookeeper
1.解压tar -zxvf zookeeper-3.4.9.tar.gz2.修改配置文件cd zookeeper-3.4.9/conf/cp zoo_sample.cfg zoo.cfg用vi编辑zoo.cfg修改配置文件并创建data文件夹zookeeper的配置参数详解(zoo.cfg) 配置参数详解(主要是%ZOOKEEPER_HOME%/conf/zoo.cfg文件) 参数名说明clie...原创 2018-02-23 17:29:51 · 884 阅读 · 0 评论 -
ubuntu安装storm
1.安装jdk参考博客:http://blog.youkuaiyun.com/qq_35192224/article/details/793549682.安装python2.8以上建议安装python3 参考博客:http://blog.youkuaiyun.com/qq_35192224/article/details/793551493.安装zookeeper 参考博客:http://blog.youkuaiyun.com/qq...原创 2018-02-23 17:40:42 · 1601 阅读 · 0 评论 -
ubuntu安装kafka
安装kafka1.下载kafka 官网地址:http://kafka.apache.org/downloads2.解压tar文件$ tar -zxf kafka_2.11.0.9.0.0 tar.gz$ cd kafka_2.11.0.9.0.03.启动服务器$ bin/kafka-server-start.sh config/server.properties4.停止服务$ bin/kafka-...原创 2018-03-05 08:34:29 · 1339 阅读 · 0 评论 -
ubuntu安装hadoop(单节点)
一丶安装jdk 说明:hadoop是使用java开发的所以必须安装jdk 安装步骤: ubuntu安装jdk 二丶设置ssh无密码登录 说明:hadoop必须通过ssh与本地计算机以及其他主机连接,所以必须设置ssh 安装步骤: 1.安装ssh sudo apt-get install ssh 2.安装rsync s...原创 2018-04-01 10:04:04 · 1729 阅读 · 0 评论 -
ubuntu安装hadoop(集群搭建)
说明:搭建4台服务器单节点搭建链接:ubuntu安装hadoop(单节点)1.将之前搭建的单节点的虚拟机在vm中克隆(注意完全克隆不是链接克隆)将克隆的第一台虚拟机取名为data12.对data1进行如下修改 a.修改ip将ip设置为192.168.1.112 修改ip请参考:ubuntu的基本设置 b.将/etc/hostname文件修改vi /etc/hostname 删除原先内容改为data...原创 2018-04-06 18:00:41 · 3311 阅读 · 1 评论 -
hadoop hdfs常用命令
常用命令一、 hadoop fs (hdfs dfs) 文件操作命令说明hadoop fs -mkdir创建HDFS目录hadoop fs -ls列出HDFS目录hadoop fs -copyFromLocal使用-copyFromLocal 复制本地(local)文件到HDFShadoop fs -put使用-put 复制本地(local)文件到HDFShadoop fs -cat列...原创 2018-04-06 20:50:39 · 448 阅读 · 0 评论