m0_61232019的博客

在linux中运行.c 文件的时候提示 警告：隐式声明与内建函数‘exit’不兼容。原因：这是因为没有把stdlib包引入，引入之后就可以了。

解决# yum install -y ncLoaded plugins: fastestmirror, refresh-packagekit, securityLoading mirror speeds from cached hostfilehttp://mirror.centos.org/centos/6/extras/x86_64/repodata/repomd.xml: [Errno 14] PYCURL ERROR 22 - "The requested URL retu

在 Linux 或 Unix 操作系统中，所有的文件和目录都被组织成以一个根节点开始的倒置的树状结构。文件系统的最顶层是由根目录开始的，系统使用/来表示根目录。在根目录之下的既可以是目录，也可以是文件，而每一个目录中又可以包含子目录文件。如此反复就可以构成一个庞大的文件系统。在Linux文件系统中有两个特殊的目录，一个用户所在的工作目录，也叫当前目录，可以使用一个点.来表示；另一个是当前目录的上一级目录，也叫父目录，可以使用两个点..来表示。. ：代表当前的目录，也可以使用 ./

这五个是独立的命令，压缩解压都要用到其中一个，可以和别的命令连用但只能用其中一个。 -c： 建立压缩档案 -x：解压　　-t：查看内容　　-r：向压缩归档文件末尾追加文件　　-u：更新原压缩包中的文件下面的参数是根据需要在压缩或解压档案时可选的。　　-z：有gzip属性的　　-j：有bz2属性的　　-Z：有compress属性的　　-v：显示所有过程　　-O：将文件解开到标准输出　　下面的参数-f是必须的　　-f： 使用档案名字

选择新CD/DVD (IDE) ---->使用ISO映像文件（选择CentOS 7 镜像存放的位置）---->关闭。选择自动配置分区（也可选择我要配置分区，此处喜欢则自动配置分区）---->完成。选择linux（L）---->CentOS 7 64位---->下一步。创建新的虚拟机--->选择自定义（高级）（C）--->下一步。设置日期和时间与当前时间一直（城市选择上海）---->完成。选择GNOM桌面---->开发工具---->完成。虚拟机名称----->位置---->下一步。

23.点击设置密码，点击下一步。10.点击CD/DVD(IDE) 选择使用ISO映像文件 点击浏览选择CentOS6.5所下载保存的路径 点击确认。8. 点击内存 右侧修改此虚拟机内存（一般为下设置成2048比较合适）点击确认。21.点击主机名，可以自己创建一个主机名，也可以不修改，视为默认 点击下一步。36.自己创建一个用户名，全名可不写，设置密码（密码要记住，加下来会用）9. 点击处理器--->选择处理器数量 ,(这里我设置成2)点击确认。25.创建设置分区：点击创建(c)———>创建（r）

在创新一个用户时，如果这个用户的名字之前也创建过同样的名字的用户，之后又删除了用户，如果删除用户的时候，没有删除干净，在从新创建的时候则会出现useradd：警告：此主目录已经存在。不从 skel 目录里向其中复制任何文件。正在创建信箱文件: 文件已存在本篇文章详细的介绍了如何解决这个问题

伪分布模式是基于Standalone模式来实现的，所以也叫Standalone伪分布模式。Spark在生产环节中，主要部署在安装linux系统的集群中。在linux系统中安装Spark需要先安装JDK，Scala等所需的依赖。

1.启动了spark分布之后没有master，worker进程2. 启动spark集群的时候提示“main” java.lang.UnsupportedClassVersionError:org/apache/spark/launcher/Main:Unsupported major.mior version 52.03. 访问sparkUI界面时出现无法访问此网站，ip拒绝了连接请求4. 启动saprk-shell 的时候提示无法分配内存或spark-shel：44:6983 以杀死

Linux下安装JDK（详解）

cala 是 Scalable Language 的简写，是一门多范式的编程语言，Scala 语言可以运行在Window、Linux、Unix、 Mac OS X等系统上。安装scala之前，需要在linux上安装jdk，如果没有安装jdk，可以参考这篇文章linux环境下安装JDK教程安装scala的过程比安装jdk要简单，过程也和安装jdk类似。现在就来开始安装scala。

client（客户端）：文件切分、与NameNode交互、获取文件的位置信息；与DataNode交互，读取或写入文件；（Master）：管理整个文件的元数据（命名空间信息，块信息）；（辅助工作者）：辅助NameNode；执行fsimage和edits的定期合作，并推送给NameNode。（Slave）：存储文件；执行数据块的读写操作。

Spark Standalone 劝分不模式：既真正的集群模式，master和worker部署在不同的节点之上，一般至少需要3个节点（一个master和两个worker），需要三台主机，slave，slave1，slave2（slave是master节点，slave1，slave2是worker节点）。一、前期准备二、安装scala三、安装spark四、问题总结

linux上安装flume，linux上安装flume有两步，在安装flume之前需要先安装好jdk。下载好flume压缩包和jdk的压缩包之后，将其上传到linux上。JDK 安装好之后我们就可以开始安装flume了。flume的安装步骤同JDK步骤类似，只要JDK安装好，flume安装就很容易了。

在配置免密登录时要先配置好主机的ip，配置好ip之后开始以下步骤。开始配置免密登录，这里以主机1免密登录主机2为例。

linux下如何安装hadoop分布式集群。安装hadoop分布式集群要先安装jdk，之后再进行配置文件。本篇文章详细的解释了安装的全部过程。