
大数据
雷文昌
这个作者很懒,什么都没留下…
展开
-
大数据常见问题汇总
1、用./bin/spark-shell启动spark时遇到异常:java.net.BindException: Can't assign requested address: Service 'sparkDriver' failed after 16 retries!解决方法:add export SPARK_LOCAL_IP="127.0.0.1" to spark-env.sh2、j...原创 2018-12-07 12:02:34 · 720 阅读 · 0 评论 -
hdfs HA原理及安装
hdfs HA原理及安装 早期的hadoop版本,NN是HDFS集群的单点故障点,每一个集群只有一个NN,如果这个机器或进程不可用,整个集群就无法使用。为了解决这个问题,出现了一堆针对HDFS HA的解决方案(如:Linux HA, VMware FT, shared NAS+NFS, BookKeeper, QJM/Quorum Journal Manager, BackupNode等)...原创 2019-01-02 17:12:53 · 321 阅读 · 0 评论