- 博客(7)
- 收藏
- 关注
翻译 cmake 学习笔记
Step1: 基本开始 文件结构: ----Tutorial |----build |----CMakeLists.txt |----tutorial.cpp CMakeLists.txt: cmake_minimum_required (VERSION 2.6) project (Tutorial) add_executable(Tutorial tutorial.cx
2017-11-06 11:49:48
354
原创 PCL1.8+Ubuntu16.04安装详解
方式一:官网prebuild版本 sudo add-apt-repository ppa:v-launchpad-jochen-sprickerhof-de/pcl sudo apt-get update sudo apt-get install libpcl-all可能是因为国内的关系,并没有更新 apt-get 成功 方式二:安装 prebuilt DEB file for PCL 1.8
2017-11-04 22:12:23
48113
13
原创 spark 作业提交与hdfs调用
local模式2个cpu提交CLASSNAME ( scala class 的名字) spark-submit --class "CLASSNAME" --master local[2] jar包路径 Standalone spark-submit --class "cCLASSNAME" --master spark://*.*.*.*:7077 --executo
2017-01-10 13:09:52
991
转载 Hadoop 分布式配置及Spark on yarn部署
配置Hadoop Hadoop的集群部署模式需要修改Hadoop文件夹中/etc/hadoop/中的配置文件,更多设置项可见官方说明,这里只设置了常见的设置项:hadoop-env.sh,yarn-env.sh、core-site.xml、hdfs-site.xml、mapred-site.xml、yarn-site.xml、slaves。 在hadoop-env.sh中配置JAVA_
2016-12-07 15:09:07
515
转载 hadoop完全分布ssh免密码登录
配置 ssh 无密码访问集群机器 在三台机器中分别执行以下两个命令,以便无密码登录到 localhost。 ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys 将 slave01 和 slave02 的公钥 id_dsa.pub 传给 master。 scp ~/.
2016-12-05 20:40:16
1311
转载 使用Eclipse编译运行MapReduce程序_Hadoop2.6.0_Ubuntu/CentOS
环境 本教程在 Hadoop 2.6.0 下验证通过,适用于 Ubuntu/CentOS 系统,理论上可用于任何原生 Hadoop 2 版本,如 Hadoop 2.4.1,Hadoop 2.7.1。 本教程主要测试环境: Ubuntu 14.04Hadoop 2.6.0(伪分布式)Eclipse 3.8 此外,本教材在 CentOS 6.4 系统中也验证通过,对 Ubunt
2016-07-05 14:54:06
990
转载 Hadoop安装教程_单机/伪分布式配置_Hadoop2.6.0/Ubuntu14.04
环境 本教程使用 Ubuntu 14.04 64位 作为系统环境(Ubuntu 12.04 也行,32位、64位均可),请自行安装系统(可参考使用VirtualBox安装Ubuntu)。 如果用的是 CentOS/RedHat 系统,请查看相应的CentOS安装Hadoop教程_单机伪分布式配置。 本教程基于原生 Hadoop 2,在 Hadoop 2.6.0 (stable)
2016-07-05 14:36:29
737
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人