大数据学习
关注
分享
扫一扫
_maybewecan
这个作者很懒，什么都没留下…
展开
-
ZooKeeper用途详解
ZooKeeper用途--超详细 ZooKeeper还可以用作其他用途，例如：数据发布与订阅（配置中心）负载均衡命名服务(Naming Service)分布式...转载 2018-11-21 19:30:01 · 7333 阅读 · 1 评论 -
maven 报错： Inspects a Maven model for resolution problems
提供一个可能的出错的原因：我的是刚刚加入依赖下载过程中出现中断，导致我下载的依赖JAR包出错，但是maven依然使用。所以我就把本地的maven的jar包手动删除，然后重新下载，问题解决了。...原创 2019-01-14 18:24:33 · 1187 阅读 · 0 评论 -
hadoop fs -options 和 hdfs dfs -options的区别
一直使用hadoop fs 突然发现有些人用dfs,虽然我知道，但是具体什么区别不是很清楚，于是花时间查了一下：1.hadoop fs -options 该命令可以用于其他文件系统，不止是hdfs文件系统内，指当前hadoop使用的那个文件系统，说该命令的使用范围大2.hdfs dfs -optionshdfs系统专属的3.hadoop dfs -options这个不用...原创 2019-01-07 00:11:18 · 406 阅读 · 0 评论 -
windows端java程序连接虚拟机Hbase长时间连接，不报错也不停止--当然包含建表，读数据
首先我的hadoop集群，zookeeper集群都是正常的工作的，启动hbase后，在linux上都是正常工作的，建表都是可以的，因此错误只能出在java程序上，这是我的测试程序：public class HbaseTest { private HBaseAdmin admin; HConnection connection; /** * 执行Test之...原创 2018-12-18 20:04:47 · 385 阅读 · 0 评论 -
sqoop连接本地windows的mysql出错：java.sql.SQLException: Access denied for user 'root'@'master' (using passwo
问题：linux的sqoop命令连接windows的mysql出错：java.sql.SQLException: Access denied for user 'root'@'master' (using password: YES) at com.mysql.jdbc.SQLError.createSQLException(SQLError.java:1078) at com...原创 2018-12-22 16:42:06 · 5096 阅读 · 0 评论 -
HIVE启动错误：org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.hdfs.server.namenode.SafeModeExcept
问题：org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.hdfs.server.namenode.SafeModeException): Cannot create directory /tmp/hive/root/2275b82d-f5d1-4fce-b548-3de2eca22bd9. Name node is in safe m...原创 2018-12-10 09:47:06 · 5050 阅读 · 2 评论 -
Hbase安装教程
1.hadoop启动成功--2.zookeeper启动成功-3.准备安装hbase我的hadoop集群，master:192.168.147.200--node1:192.168.147.201--node2:192.168.147.202安装教程：1.上传hbase压缩包到一个结点，我上传到master的/usr/local/soft/下，然后直接解压文件tar -zxvf hb...原创 2018-12-14 23:24:40 · 5296 阅读 · 0 评论 -
解决：FTP隔离用户ftp将数据发送到服务器之前不加密或编码，要保护密码和数据数据，请用WEB文件夹（WenDAV）
版本 Cent OS 6.5原因：没有设置SELinux的问题背景：SELinux(Security-Enhanced Linux) 是美国国家安全局（NSA）对于强制访问控制的实现，是 Linux史上最杰出的新安全子系统。SELinux 是 2.6 版本的 Linux 内核中提供的强制访问控制 (MAC)系统。对于目前可用的 Linux 安全模块来说，SELinux 是功能最全面，而且测...原创 2018-11-29 15:15:09 · 7966 阅读 · 1 评论 -
Windows10 mysql解决MySQL服务无法启动 系统出错 发生系统错误 1067
查看日志就是这个问题：Fatal error: Can't open and lock privilege tables: Table 'mysql.host' doesn't exi最近学习用到mysql,之前装的mysql5.7莫名其妙出了问题，上次就是打不开mysql服务，一气之下重装了一个低版本的mysql5.5，删数据库真的好麻烦，好在重装了之后5.5用了一段时间，但是今天5.5版本...原创 2018-11-22 17:39:03 · 59855 阅读 · 14 评论 -
scala获取当前系统时间的两种方式
有问题要解决，逃避不是办法import java.text.SimpleDateFormatimport java.util.Dateval df = new SimpleDateFormat("yyyy-MM-dd HH:mm:ss")1.df.format(new Date())2.df.format(System.currentTimeMillis())...原创 2019-01-21 19:55:00 · 5147 阅读 · 0 评论