对于刚刚接触分布式系统的小伙伴们来说，一提起分布式系统，就感觉高大上，深不可测。而且看了很多书和视频还是一脸懵逼。这篇文章主要使用大白话的方式，带你理解一下分布式系统中的CAP理论。保证你能听懂。为了防止被误以为是洗文的嫌疑，我在这里先说明一下：我参考了知乎和博客园上等相关文章，还有下面的图不是我自己画的，我觉得能清晰地表达出意思就是好图，在百度图片上下载了一波。一、什么是分布式系统拿一个最简单的例子，就比如说我们的图书管理系统。之前的系统包含了所有的功能，比如用户注册登录、管理员功能、图书借阅

非root用户安装Hadoop环境，在免密的设置上有时候无效，比如出现如下：[root@vm101-138-248-149 ~]# ssh 101.138.248.149 -p 2248root@101.138.248.149's password:Permission denied, please try again.root@101.138.248.149's password:Permission denied, please try again.root@101.138.248.14

今天突然想访问一下hive的web界面，发现无法访问，于是进行了如下友好操作：1.hive的web访问主要是hiveserver2服务的开启，请先配置hive-size.xml<!-- 这是hiveserver2 --> <property> <name>hive.server2.thrift.port...

hive 开启了hiveServer2服务，连接了一段时间就拒绝连接，hive日志报错如下：Exception in thread "org.apache.hadoop.hive.common.JvmPauseMonitor$Monitor@56b9d43f" java.lang.OutOfMemoryError: Java heap spaceException in thread "Tri...

当环境搭建完成，运行hive的时候，hive命令行无法执行mapreduce,然后我就去看日志，发现hadoop的namenode的log,如下：org.apache.hadoop.yarn.server.nodemanager.DefaultContainerExecutor: Exception code 1............解决方式：在mapred-site....

本地虚拟机上centos系统的时间与北京时间不一致，如下命令可以直接更改：shell:ntpdate -u ntp.api.bzshell:clock -w执行完上面两步即可，命令行执行date查看当前系统时间，显示正确。注意：若不加上-u参数， 会出现以下提示：no server suitable for synchronization found如果没有ntpdate命...

搭建完集群之后，在hbase shell中查看表，出现error: KeeperErrorCode = NoNode for /hbase/master错误排除解决：1.查看jps里面的进程，hbase的HMaster和hadoop的datanode挂掉了2.查看hbase的log，信息如下：org.apache.hadoop.ipc.RemoteException(java.io.I...

启动hbase的时候报错：java.lang.IllegalStateException: The procedure WAL relies on the ability to hsync for proper operation during component failures, but the underlying filesystem does not support doing so...

今天查询类似hdfs的底层分布式存储的时候，突然发现的tachyon,读完之后挺有意思的。---------------------------------------------------------------------------------------------------------------------------------------------------------...