<?xml version="1.0" encoding="utf-8" ?><rss version="2.0"><channel><title><![CDATA[yangym2002的博客]]></title><description><![CDATA[]]></description><link>https://blog.youkuaiyun.com/yangym2002</link><language>zh-cn</language><generator>https://blog.youkuaiyun.com/</generator><copyright><![CDATA[Copyright &copy; yangym2002]]></copyright><item><title><![CDATA[VirtualBox虚拟机+ubuntu16.04  桥接模式、配置 静态ip，实现宿主主机、ubuntu互相ping通]]></title><link>https://blog.youkuaiyun.com/yangym2002/article/details/94966364</link><guid>https://blog.youkuaiyun.com/yangym2002/article/details/94966364</guid><author>yangym2002</author><pubDate>Sun, 07 Jul 2019 10:21:03 +0800</pubDate><description><![CDATA[1 、选择桥接模式
如图，就是桥接模式 选上复制物理连接状态




2、 查看宿主主机的网关、DNS



3、更改ubuntu配置文件
ubuntu的网卡配置信息在 /etc/network/interfaces

yangym@yangym-VirtualBox:~$ sudo vi /etc/network/interfaces

打开后添加如下代码
auto enp0s3   ...]]></description><category></category></item><item><title><![CDATA[在docker上部署centos+hadoop3.0分布式集群]]></title><link>https://blog.youkuaiyun.com/yangym2002/article/details/79014378</link><guid>https://blog.youkuaiyun.com/yangym2002/article/details/79014378</guid><author>yangym2002</author><pubDate>Tue, 09 Jan 2018 16:28:45 +0800</pubDate><description><![CDATA[完整步骤的思维导图




一、主机规划
3台主机：1个master、2个slaver/worker
ip地址使用docker默认的分配地址：
master：
主机名： hadoop2、ip地址： 172.17.0.2


slaver1：
主机名： hadoop3、ip地址： 172.17.0.3
主机名： hadoop4、ip地址： 172.17.0.4


]]></description><category></category></item><item><title><![CDATA[docker上安装centos镜像]]></title><link>https://blog.youkuaiyun.com/yangym2002/article/details/79000241</link><guid>https://blog.youkuaiyun.com/yangym2002/article/details/79000241</guid><author>yangym2002</author><pubDate>Mon, 08 Jan 2018 10:33:31 +0800</pubDate><description><![CDATA[1、查找镜像源
$ docker search centos
NAME DESCRIPTION STARS OFFICIAL
centos The official build of CentOS. 3857 [OK]


2、下载镜像
docker pull centos


3、查看已下载的镜像
$ docker image ls
REPOSITORY TAG IMAG]]></description><category></category></item><item><title><![CDATA[centos7安装遇到的问题]]></title><link>https://blog.youkuaiyun.com/yangym2002/article/details/77879586</link><guid>https://blog.youkuaiyun.com/yangym2002/article/details/77879586</guid><author>yangym2002</author><pubDate>Thu, 07 Sep 2017 11:52:12 +0800</pubDate><description><![CDATA[一、centos7 默认安装好后没有获取ip地址，需要手动配置。方法如下：

1.输入“ip addr”并按回车键确定，发现无法获取IP(CentOS 7默认没有ifconfig命令)，记录下网卡名称（本例中为ens33）。
2.输入“cd /etc/sysconfig/network-scripts/”按回车键确定，继续输入“ls”按回车键查看文件。
3.输入“vi ifcfg-ens33”]]></description><category></category></item><item><title><![CDATA[hadoop-2.6.0集群环境搭建]]></title><link>https://blog.youkuaiyun.com/yangym2002/article/details/75036024</link><guid>https://blog.youkuaiyun.com/yangym2002/article/details/75036024</guid><author>yangym2002</author><pubDate>Wed, 12 Jul 2017 17:36:16 +0800</pubDate><description><![CDATA[一、主机规划

            1、准备4台Ubuntu 14.04 64-bit 虚拟机，一台充当resourcemanager和namenode，另外三台充当nodemanager和datanode。由于需要实现主机间ssh无密码访问，主机IP采用静态配置。配置如下：

namenode  ip:192.168.1.110
datanode1 ip:192.168.1.111]]></description><category></category></item><item><title><![CDATA[在ubuntu上安装jdk1.8]]></title><link>https://blog.youkuaiyun.com/yangym2002/article/details/74979461</link><guid>https://blog.youkuaiyun.com/yangym2002/article/details/74979461</guid><author>yangym2002</author><pubDate>Tue, 11 Jul 2017 15:55:32 +0800</pubDate><description><![CDATA[1、从oracle网站下载jdk1.8的压缩包，如jdk-8u131-linux-x64.tar.gz
2、使用ftp、pscp工具、共享目录等将下载好的jdk上传到ubuntu主机；
3、对文件进行解压缩
      a、将文件解压到/usr/lib/jdk目录；（我是为了方便能应用到所有用户）
      b、解压命令：sudo tar -xvf jdk-8u131-linux-x64]]></description><category></category></item><item><title><![CDATA[ubuntu安装完成后设置root用户密码]]></title><link>https://blog.youkuaiyun.com/yangym2002/article/details/74978536</link><guid>https://blog.youkuaiyun.com/yangym2002/article/details/74978536</guid><author>yangym2002</author><pubDate>Tue, 11 Jul 2017 15:40:44 +0800</pubDate><description><![CDATA[安装完Ubuntu后在终端使用命令：
su -
然后输入密码，总是不正确。
原来是自己没有设置ROOT密码。


设置ROOT密码方法如下：
开启终端，输入以下命令：
sudo passwd root
然后输入密码按"确认"键就OK了。

Ubuntu 中的 root 帐号默认是被禁用了的。在这种情况之下，如果你想要使用 root 的权限来干些事情，就需要 sudo 指令。对]]></description><category></category></item><item><title><![CDATA[ubuntu上pushd命令执行错误（/bin/sh: 1: pushd: not found）解决办法]]></title><link>https://blog.youkuaiyun.com/yangym2002/article/details/74640415</link><guid>https://blog.youkuaiyun.com/yangym2002/article/details/74640415</guid><author>yangym2002</author><pubDate>Fri, 07 Jul 2017 11:13:00 +0800</pubDate><description><![CDATA[ubuntu上pushd命令执行错误（/bin/sh: 1: pushd: not found）解决办法
查看原因：进入/bin目录，查看sh的链接文件，显示如下：表示sh命令链接到的是dash，而pushd命令需要在bash的环境中执行。


解决方法：执行sudo dpkg-reconfigure dash 命令，将dash设置为No。


再次查看：查看sh的链接已经修改为ba]]></description><category></category></item><item><title><![CDATA[spark中application、driver、job、stage的理解]]></title><link>https://blog.youkuaiyun.com/yangym2002/article/details/74208108</link><guid>https://blog.youkuaiyun.com/yangym2002/article/details/74208108</guid><author>yangym2002</author><pubDate>Mon, 03 Jul 2017 16:27:17 +0800</pubDate><description><![CDATA[Spark学习笔记1：Application，Driver，Job，Task，Stage理解
        
        
        
            看了spark的原始论文和相关资料，对spark中的一些经常用到的术语做了一些梳理，记录下。
1，Application
application（应用）其实就是用spark-submit提交的程序。比方说spark example]]></description><category></category></item><item><title><![CDATA[Spark编程指南]]></title><link>https://blog.youkuaiyun.com/yangym2002/article/details/73920259</link><guid>https://blog.youkuaiyun.com/yangym2002/article/details/73920259</guid><author>yangym2002</author><pubDate>Thu, 29 Jun 2017 16:45:40 +0800</pubDate><description><![CDATA[spark-1.6.0 [原文地址]Spark编程指南概述
总体上来说，每个Spark应用都包含一个驱动器（driver）程序，驱动器运行用户的main函数，并在集群上执行各种并行操作。
Spark最重要的一个抽象概念就是弹性分布式数据集（resilient distributed dataset – RDD），RDD是一个可分区的元素集合，其包含的元素可以分布在集群各个节点上，并且可以执行一些分布]]></description><category></category></item><item><title><![CDATA[spark开发环境搭建]]></title><link>https://blog.youkuaiyun.com/yangym2002/article/details/73845409</link><guid>https://blog.youkuaiyun.com/yangym2002/article/details/73845409</guid><author>yangym2002</author><pubDate>Wed, 28 Jun 2017 15:07:33 +0800</pubDate><description><![CDATA[前言
　　无论Windows 或Linux 操作系统，构建Spark 开发环境的思路一致，基于Eclipse 或Idea，通过Java、Scala 或Python 语言进行开发。安装之前需要提前准备好JDK、scala 或python 环境，然后在Eclipse 中下载安装Scala 或Python 插件(Spark支持Java、Python等语言)。基本步骤如下：
　　第一步：安装JDK
　　第二]]></description><category></category></item></channel></rss>