- 博客(16)
- 收藏
- 关注
原创 linux下安装指定版本的git
如果在linux版本的git安装是使用:yum install git,那么是自带的版本是1.7.1,这版本相对旧了。可以卸载(yum remove git)安装新版本的。步骤如下:安装编译所依赖的软件 1:yum install curl-devel expat-devel gettext-devel openssl-devel zlib-devel as...
2020-02-03 20:43:59
4480
原创 数据源之Excel和它的坑
数据源的种类有很多种,比如:1:用户的行为日志文件.2:业务业务数据库数据(关系型数据 和 非关系型数据库: 文档, KV(键值)等).3:excel文档(财务 和 行政的一些报表).我目前所负责的就是excel文档的一个入库,在入库的过程中发现了一些比较坑人的地方,如下:1:科学计数法Excel中如果数据超过12位,则会自动进行数据转换成科学计数法数据;由于Excel的精...
2019-09-01 23:05:25
2090
原创 hive问题: java.net.ConnectException: Connection refused (Connection refused) (state=08S01,code=0)
beeline连接hiveserver2的时候报错如下:错误提示链接拒绝,拒绝的原因大致如下:1:hiveserver2的服务没有启动后台启动命令如下并通过jps检查进程2:MySQL的远程链接没有授权(在MySQL书库的user表中)授权命令如下:grant all privileges on *.* to '用户名'@'%' identified b...
2019-05-05 21:40:31
12529
原创 java.io.FileNotFoundException: E:\niubi.java (系统找不到指定的文件。) 的新坑
在做hadoop文件上传时遇到java.io.FileNotFoundException: E:\niubi.java (系统找不到指定的文件。)代码如下 错误可能性:1.文件的路径不存在或文件的命名不规范(本人存在) 2:文件的编码格式不正确(百度一致的结果修改为UTF-8) 3:文件的权限问...
2019-01-14 20:52:22
2071
原创 ping: unknown host www.baidu.com 和 connect: Network is unreachable 的解决
安装新的虚拟机,IP等一切设置好之后,用远程工具也是能链接的 ,但是ping 百度的时候却提示ping: unknown host www.baidu.com,然后再次尝试了ping 一个具体的IP却提示: connect: Network is unreachable。(稍微懂网络的人都是知道的,网址最终是要通过域名解析服务器(配置的DNS)解析成对应的ip).1:ping 百度网址 ...
2019-01-09 21:56:36
5974
原创 hadoop集群的搭建,ubuntu系统
1.先安装对应的ubuntu系统2.根据你个人电脑的实际情况克隆若干台机器3.修改克隆机的主机名 修改 /etc/hostname4.将所有虚拟机的的IP改为静态IP 步骤:1.先用ifconfig查看一下当前虚拟机使用的虚拟网卡(eth0,enp0s25,ens33等) 2.修改 /etc/network/interfaces(内容如下) ...
2018-12-25 19:08:09
1395
原创 ubuntu软件源的修改
ubuntu是一个基于linux内核分支出来的一个比较流行的系统.ubuntu自带的软件源是国外的,因为网络的问题,不修改自带的软件源,安装软件所花费的时间成本就非常的高,所有可以将软件源改成国内的软件源.国内的软件源:阿里,网易等一线互联网公司,清华大学,浙江大学等一流的学府都有的.阿里源deb http://mirrors.aliyun.com/ubuntu/ bionic main ...
2018-12-24 18:48:38
1847
原创 在Linux下运行scp提示:-bash: scp: command not found
在Linux下通过scp来拷贝文件是经常的事情,如果你安装的版本没有安装scp的话.那么就需要自己安装一下.通过命令:yum -y install openssh-clients .需要注意的是如果你的目标主机没有也没有安装scp的话也是报这个错误的.所以用which scp在本地主机和目标主机查看一下,缺少的哪边缺少就哪边安装....
2018-12-15 21:15:29
2692
原创 redis的下载和安装
1:Redis的下载路径https://redis.io/download2:先将下载好的Redis上传到你的虚虚拟机3:解压Redis(tar -zxvf 下载的.tar.gz安装包 -C 解压到的路径)4:解压完之后进入到解压路径用make命令编译Redis 编译过程中可能遇见的错误: 1: cc: command not found 说明缺少gcc,通过yu...
2018-12-13 19:57:00
1375
原创 zookeeper集群搭建及shell一键启动一键关闭
zookeeper是一个高度可靠的分布式协调服务,其他的一些集群的高可用(HA)都是通过zookeeper集群来实现的。搭建zookeeper集群的前提是先安装jdk(zookeeper集群内每一台机器都要安装),因为zookeeper是用java编写的。jdk是否安装成功验证如下:将下载好的zookeeper解压到安装目录: 修改zookeeper的配置文件:1:修改...
2018-11-13 11:27:22
2534
原创 window下执行Hadoop或spark报错:Could not locate executable null\bin\winutils.exe in the Hadoop binaries.
1:错误原因 机器本地没有配置Hadoop的环境2:处理思路 在本地配置Hadoop环境(和java的环境配置是一样的) 注意:所有的环境变量都配置成系统变量,以免切换用户而带来不必要的文图3:处理过程 自己去下载源码编译(Hadoop没有提供window版本。初学者不建议,耗时,脑壳痛) 网上找一个编译好的 ...
2018-11-07 18:02:42
1854
1
原创 dubbo报错:com.alibaba.dubbo.remoting.TimeoutException
最近在自学dubbo,经常遇见com.alibaba.dubbo.remoting.TimeoutException这样一个错误。出现这杨错误有一下几种可能。1:dubbo的配置错误。(ip地址,端口号)2:zookeeper服务没有开启。3:数据困没有开启。4:实体类没有序列化。...
2018-05-29 14:13:24
2640
原创 Linux下安装安装redis
1:安装redis编译环境 yum install gcc-c++2:解压redis tar -xvf redis-3.0.0 -C /usr/local/redis3:编译redis 切换到解压的路径下执行编译 [root@yarui redis-3.0.0]# make 4:安装redis并指定路径 [root@yarui redis-3.0.0]# make ...
2018-04-10 14:25:01
1286
原创 Linux下安装tomcat
1:解压源文件的tomcattar -zxvf apache-tomcat-7.0.572:将tomcat移动你要安装的路径下[root@yarui soft]# mv apache-tomcat-7.0.57 /usr/local/src/java/tomcat3:切换到tomcat安装的bin目录下,启动tomcat[root@yarui bin]# sh startup.shUsing ...
2018-04-10 01:12:35
1326
原创 Linux配置JDK以及错误处理
1:在/etc/profile下配置环境变量## java_home export JAVA_HOME=/usr/local/src/java/jdk1.7.0_71export PATH=$JAVA_HOME/bin:$PATH"/etc/profile" 86L, 1932C 已写入[root@yarui ~]# source /etc/profile2:初次测试安装是否成功[root@ya...
2018-04-10 00:38:05
2096
原创 oracle的安装
数据库后缀的解释i: internet 网络技术。(8i 和 9i)g: grid网格技术。(10g 和 11g)c: cloud云计算。(目前的12c)数据的下载地址http://www.oracle.com/technetwork/database/enterprise-edition/downloads/index.html安装步骤一将下载的两个文件解
2017-07-21 11:59:31
1389
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人