<?xml version="1.0" encoding="utf-8" ?><rss version="2.0"><channel><title><![CDATA[sinat_39193763的博客]]></title><description><![CDATA[]]></description><link>https://blog.youkuaiyun.com/sinat_39193763</link><language>zh-cn</language><generator>https://blog.youkuaiyun.com/</generator><copyright><![CDATA[Copyright &copy; sinat_39193763]]></copyright><item><title><![CDATA[Spark]]></title><link>https://blog.youkuaiyun.com/sinat_39193763/article/details/90552084</link><guid>https://blog.youkuaiyun.com/sinat_39193763/article/details/90552084</guid><author>sinat_39193763</author><pubDate>Sat, 25 May 2019 21:56:02 +0800</pubDate><description><![CDATA[一.实验目的
1． 了解Spark SQL所能实现的功能；
2． 能够使用Spark SQL执行一些sql语句。
二.实验要求
1． 能在实验结束之后完成建立数据库，建立数据表的数据结构；
2． 建立数据表之后能在Spark SQL中执行SQL语句进行查询；
3． 练习怎么向Spark SQL中导入数据。
三.实验原理
Spark SQL用于以交互式方式编写并执行Spark SQL，且书写语法为类...]]></description><category></category></item><item><title><![CDATA[Hadoop之MapReduce实验报告]]></title><link>https://blog.youkuaiyun.com/sinat_39193763/article/details/90552017</link><guid>https://blog.youkuaiyun.com/sinat_39193763/article/details/90552017</guid><author>sinat_39193763</author><pubDate>Sat, 25 May 2019 21:50:09 +0800</pubDate><description><![CDATA[一、实验题目
编写MapReduce程序Dictionary。
二、实验目的
Dictionary遍历dictionary.txt文件，读取数据，并把其中的英文词汇转化为法语或意大利语。
文档格式：每行空格前为英语，空格后为法语或意大利语，中括号中为词性。
三、任务分解
首先，先观察待处理文档，由于windows下与linux中回车符的表示不同（一个为\r\n,一个为\n）。
所以同一个文档在不同...]]></description><category></category></item><item><title><![CDATA[安装配置Hive NOSQL及其JDBC驱动实验报告]]></title><link>https://blog.youkuaiyun.com/sinat_39193763/article/details/90551970</link><guid>https://blog.youkuaiyun.com/sinat_39193763/article/details/90551970</guid><author>sinat_39193763</author><pubDate>Sat, 25 May 2019 21:46:08 +0800</pubDate><description><![CDATA[NOSQL安装
①官网下载mysql-server（yum安装）
wget http://dev.mysql.com/get/mysql-community-release-el7-5.noarch.rpm
若wget不可用，下载安装wget：yum -y install wget
②解压rpm -ivh mysql-community-release-el7-5.noarch.rpm
③安装yu...]]></description><category></category></item><item><title><![CDATA[Hbase安装配置]]></title><link>https://blog.youkuaiyun.com/sinat_39193763/article/details/90551948</link><guid>https://blog.youkuaiyun.com/sinat_39193763/article/details/90551948</guid><author>sinat_39193763</author><pubDate>Sat, 25 May 2019 21:44:01 +0800</pubDate><description><![CDATA[HBase安装配置
①下载压缩包（选择与自己安装的Hadoop版本的兼容版本，见后面附录）
官网下载地址：https://mirrors.tuna.tsinghua.edu.cn/apache/hbase/stable/
选择稳定版hbase-1.4.9-bin.tar.gz，在Windows里面下载。
②将压缩包从Windows传输到Linux当前目录下
SecureCRT 【File】→【Co...]]></description><category></category></item><item><title><![CDATA[HDFS的Java程序]]></title><link>https://blog.youkuaiyun.com/sinat_39193763/article/details/90517339</link><guid>https://blog.youkuaiyun.com/sinat_39193763/article/details/90517339</guid><author>sinat_39193763</author><pubDate>Fri, 24 May 2019 15:34:43 +0800</pubDate><description><![CDATA[一、HDFSMKdir.java新建HDFS目录/aadir

二、HDFSUpload.java写入/上传 本地文件c:\hdfs\aa.txt 到HDFS的/aadir目录下。

加载包
三、HDFSDownload.java读/下载 HDFS的根目录文件/bb.txt 到本地c:\hdfs目录下
加载包
四、HDFSFileIfExist.java查看HDFS文件/bb.txt是否存在
实验...]]></description><category></category></item><item><title><![CDATA[hdfs的shell命令]]></title><link>https://blog.youkuaiyun.com/sinat_39193763/article/details/90517184</link><guid>https://blog.youkuaiyun.com/sinat_39193763/article/details/90517184</guid><author>sinat_39193763</author><pubDate>Fri, 24 May 2019 15:27:58 +0800</pubDate><description><![CDATA[hdfs的shell命令，有三种形式，用前面两个。
hdfs dfs
√
hadoop fs
√
hadoop dfs
×
常用的hdfs的shell命令：
hdfs
dfs -ls /  查看hdfs根目录下文件和目录
hdfs
dfs -ls -R /      查看hdfs根目录下包括子目录在内的所有文件和目录
hdfs
dfs -mkdir /aa/bb
在hdfs的/aa目录下新建/bb...]]></description><category></category></item><item><title><![CDATA[Linux的shell命令]]></title><link>https://blog.youkuaiyun.com/sinat_39193763/article/details/90517153</link><guid>https://blog.youkuaiyun.com/sinat_39193763/article/details/90517153</guid><author>sinat_39193763</author><pubDate>Fri, 24 May 2019 15:26:39 +0800</pubDate><description><![CDATA[常用的linux的shell命令：
cd
/aa&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 转到/aa目录
pws &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;显示当前目录
ll
/aa&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;...]]></description><category></category></item><item><title><![CDATA[在Eclipse里新建Maven Project]]></title><link>https://blog.youkuaiyun.com/sinat_39193763/article/details/90516788</link><guid>https://blog.youkuaiyun.com/sinat_39193763/article/details/90516788</guid><author>sinat_39193763</author><pubDate>Fri, 24 May 2019 15:11:57 +0800</pubDate><description><![CDATA[在Eclipse里新建Maven Project

输入com.bla，项目名称HDFSTest

自动生成Maven项目，新建包hdfs.files，包里新建class：4个java文件

编程过程使用Eclipse快捷键
Alt+/&nbsp;
自动补全单词
Ctrl+1
自动修正，自动添加包、异常

...]]></description><category></category></item><item><title><![CDATA[安装配置JDK+Eclipse+Maven]]></title><link>https://blog.youkuaiyun.com/sinat_39193763/article/details/90516724</link><guid>https://blog.youkuaiyun.com/sinat_39193763/article/details/90516724</guid><author>sinat_39193763</author><pubDate>Fri, 24 May 2019 15:08:43 +0800</pubDate><description><![CDATA[步骤：1.安装JDK→2.安装Eclipse→3.安装Maven→4. Eclipse里配置Maven （下载Windows版本，在Windows里安装使用。）
1.安装配置JDK
①官网下载Java开发工具安装包jdk-8u201-windows-x64.exe：https://www.oracle.com/technetwork/java/javase/downloads/jdk8-downl...]]></description><category></category></item><item><title><![CDATA[Hadoop安装说明（六）]]></title><link>https://blog.youkuaiyun.com/sinat_39193763/article/details/90516664</link><guid>https://blog.youkuaiyun.com/sinat_39193763/article/details/90516664</guid><author>sinat_39193763</author><pubDate>Fri, 24 May 2019 15:06:34 +0800</pubDate><description><![CDATA[克隆虚拟机
先关闭被克隆虚拟机，【虚拟机(M)】→【管理(M)】→【克隆©】





]]></description><category></category></item><item><title><![CDATA[Hadoop安装说明（四）]]></title><link>https://blog.youkuaiyun.com/sinat_39193763/article/details/90516558</link><guid>https://blog.youkuaiyun.com/sinat_39193763/article/details/90516558</guid><author>sinat_39193763</author><pubDate>Fri, 24 May 2019 15:01:53 +0800</pubDate><description><![CDATA[SecureCRT新建Session、修改外观

Hostname输入下下图安装CentOS时的以太网IP地址


Session name可以任意

双击新建Session，输入root用户密码，选择【Save password】

连接成功

修改外观：【Options】→【Session Options】→【Appearance】→【Font】选择字体
【Character encoding...]]></description><category></category></item><item><title><![CDATA[Hadoop安装说明（三）]]></title><link>https://blog.youkuaiyun.com/sinat_39193763/article/details/90516406</link><guid>https://blog.youkuaiyun.com/sinat_39193763/article/details/90516406</guid><author>sinat_39193763</author><pubDate>Fri, 24 May 2019 14:56:18 +0800</pubDate><description><![CDATA[安装SecureCRT
![在这里插入图片描述](https://img-blog.csdnimg.cn/20190524143313629.pn



安装完成后不运行程序，复制压缩包中的Kg_ttrar.exe程序到安装目录。
运行Kg_ttrar.ex，点击Patch按钮两次，分别加载两个默认文件，对源程序（即所安装程序的主程序）打补丁。如下所示：
选择SecureCRT文件，点击【打开】
...]]></description><category></category></item><item><title><![CDATA[Hadoop安装说明（五）]]></title><link>https://blog.youkuaiyun.com/sinat_39193763/article/details/90417008</link><guid>https://blog.youkuaiyun.com/sinat_39193763/article/details/90417008</guid><author>sinat_39193763</author><pubDate>Tue, 21 May 2019 22:36:33 +0800</pubDate><description><![CDATA[以下操作在SecureCRT里面完成
1.关闭防火墙
firewall-cmd
–state 显示防火墙状态running/not running
systemctl stop
firewalld 临时关闭防火墙，每次开机重新开启防火墙
systemctl disable
firewalld 禁止防火墙服务。
2.传输JDK和HADOOP压缩包
SecureCRT 【File】→【Connect ...]]></description><category></category></item><item><title><![CDATA[Hadoop安装说明（二）]]></title><link>https://blog.youkuaiyun.com/sinat_39193763/article/details/90372383</link><guid>https://blog.youkuaiyun.com/sinat_39193763/article/details/90372383</guid><author>sinat_39193763</author><pubDate>Mon, 20 May 2019 11:58:06 +0800</pubDate><description><![CDATA[安装CentOS7


点击【创建新的虚拟机】


点击【自定义安装】



点击【下一步】



点击【稍后安装操作系统(S)】


点击【Linux(L)】



输入虚拟机名称，选择安装位置



点击【下一步】



点击【下一步】



点击【使用网络地址转换(NAT)(E)】



10.选择【LSI Logic(L)】点击【下一步】

11.选择【SCSI(S)】点击【下一步】

1...]]></description><category></category></item><item><title><![CDATA[Hadoop安装说明（一）]]></title><link>https://blog.youkuaiyun.com/sinat_39193763/article/details/90371628</link><guid>https://blog.youkuaiyun.com/sinat_39193763/article/details/90371628</guid><author>sinat_39193763</author><pubDate>Mon, 20 May 2019 11:21:05 +0800</pubDate><description><![CDATA[Hadoop安装说明（一）
第一次接触大数据技术与应用
VMWare的安装



点击【下一步】开始安装

2.
点击【更改】，选择安装路径，点击【下一步】



取消勾选，点击【下一步】


点击【安装】



点击【许可证】


粘贴激活码文件里的激活码，点击【输入】


点击【完成】，安装完成


...]]></description><category></category></item></channel></rss>