
Linux
Darkness303
爱科学,爱祖国!!
展开
-
安装Python_Django
安装jdk:mkdir /usr/local/java --新建文件夹 2. cp jdk-7u75-linux-x64.tar.gz /usr/local/java --复制文件夹到新建目录-------------------------------------------------------------------------原创 2017-08-18 14:59:23 · 385 阅读 · 0 评论 -
同样局域网下的主机互相访问某主机下的虚拟机
第一步:配置如下第二步:配置点击“编辑”->“虚拟网络编辑器”第三步:按顺序点击进入第四步:配置如下:第五部:要不关闭防火墙(不建议),要不修改入站策略:第六步:按顺序点击第七步:点击端口 输入端口号 保存即可。测试:主机ip:10.21.20.26 虚拟机ip:192.168.71.128 局域网内主机ip:10.21.20.66成功显示!...原创 2018-03-19 12:39:55 · 1055 阅读 · 0 评论 -
hadoop-2.7.4完全分布式集群部署 外加测试例子mapreduce
更改系统时区(将时间同步更改为北京时间)xiaolei@hadoop1:~$ dateWed Oct 26 02:42:08 PDT 2017xiaolei@hadoop1:~$ sudo tzselect根据提示选择Asia China Beijing Time yes最后将Asia/Shanghai shell scripts 复制到/etc/localtimexiaolei@h...原创 2017-09-01 13:20:04 · 762 阅读 · 0 评论 -
Error:scalac: missing or invalid dependency detected while loading class file 'RDD.class'.问题
使用intelig 运行spark程序出现Error:scalac: missing or invalid dependency detected while loading class file 'RDD.class'. Could not access term hadoop in package org.apache, because it (or its dependencies) a原创 2017-10-24 22:23:22 · 1433 阅读 · 0 评论 -
Ubuntu突然连接不上网
好早之前安装的Ubuntu,运行过大量程序,有一天突然连接不上网络,之前的网络配置还在那里。 去本地电脑找到服务,发现原来是vmware Nat service 被关掉了,无语,浪费我好多时间!!!! (所以写个备忘录) --正确设置vmware的共享文件夹后 在/mnt目录下找不到共享文件(缺少vmware tool)...原创 2017-10-24 17:12:27 · 3540 阅读 · 0 评论 -
Ubuntu下搭建spark集群开发环境
之前在windows下搭建了一个spark的开发环境,但是后来发现如果想要搞spark streaming的例子的话在Linux下使用更方便,于是在Ubuntu下面搭建一下spark开发环境,记录以做备忘之用。1 .首先去spark官网下载相关软件,我这里用的是spark2.1.0版本http://spark.apache.org/downloads.html,对应的hadoop版本是2.7.原创 2017-10-23 12:10:24 · 1928 阅读 · 0 评论 -
securecrt 上传文件出现 *** was skipped 问题
当上使用securecrt上传文件时,出现** was skipped 就是没有上传成功,因为权限不够。解决办法:前面加 sudo,就可以了,即:sudo rz //注意只要不是root的用户,一般的用户执行命令钱通常需要加 "sudo"原创 2017-08-29 17:19:36 · 6227 阅读 · 0 评论 -
Ubuntu 17.04更换源
更换Ubuntu 有两种方法,一种是直接在命令行更换,还有一种是在Ubuntu 界面中更换。第一种命令行更换:输入:sudo /etc/apt/sources.list /etc/apt/sources.list.bak //备份原来的源阿里云的源:替换为阿里云的源:原创 2017-08-29 16:25:13 · 8719 阅读 · 0 评论 -
elk测试 例子
过程:在logstash命令行输入,将内容发个elasticsearch,可以看到elk有个自带的logstash 的index pattern,直接使用这个,在kibana中创建,然后再在kibana中可视化出来。[注:elasticsearch必须先启动,之后才启动logstash和kibana]1、 首先在logstash新建一个文件夹config,将写好的write_t原创 2017-08-18 15:43:05 · 949 阅读 · 0 评论 -
使用lrzsz工具和 bec-cli工具在百度云下载数据
BCE-CLI-0.10.3工具安装:安装该工具,前提是必须已经安装Python(安装过程请参考,之前的“Django安装与连接数据库”文件)。BCE-CLI 工具下载链接:https://cloud.baidu.com/doc/Downloadcenter/CLI.html (选择Linux版本)。将下载好的bce-cli 工具上传到服务器。原创 2017-08-18 15:46:48 · 618 阅读 · 0 评论 -
使用log4j(和spring boot logback很相似)向logstash发送数据
Log4j 主要由三部分组成:loggers:负责采集日志信息。appenders:负责将日志信息发布到不同地方。layouts:负责以各种风格格式化日志信息。首先编写一个java程序: 使用log4j(和spring boot logback很相似)向logstash发送数据 > image2017-7-27_17-54-38.png" alt="" style="mar原创 2017-08-18 15:10:32 · 1378 阅读 · 0 评论 -
ELK-5.4.1和x-pack权限控制 安装指导
安装jdk下载jdk-1.8,下载后解压到/usr/local/java文件夹下配置环境变量,在/etc/profile,写入如下:输入完成后 source /etc/profile使得修改文件生效。(如果jdk是rpm,则使用rpm安装,输入:rpm -ivh install jdk1.8.0_131.rpm)JAVA_HOME=/usr/local/ja原创 2017-08-18 11:31:33 · 620 阅读 · 0 评论