- 博客(3)
- 收藏
- 关注
翻译 MapR上的高可用性
介绍高可用性(HA)是指系统能够在出现无法预料的故障时保持正常运行的能力,避免意外停机或服务中断。HA是企业依赖的关键功能,可支持面向客户的应用程序和服务级别协议HA在MapR融合数据平台中的优势MapR融合数据平台中的高级HA功能为尝试利用大数据的组织提供了许多好处没有数据丢失MapR平台确保关键数据永远不会通过可配置的复制级别丢失。自动故障转移可确保群集始终可用,因此大数据应用程序可...
2019-03-15 10:06:37
643
原创 spark安装过程
spark安装过程安装步骤:1.上传解压,ps:首先保证每个节点上有scala2.修改spark-env.sh(cp or mv spark-env.sh template spark-env.sh)3.修改slaves配置文件cp slaves.template slaves4.修改自己的系统配置文件,我的是/etc/profile5.分发到其他节点scp -r spark hado...
2018-11-20 14:00:44
371
原创 hadoop各种流程
元数据合并流程HDFS的读写过程shuffle过程job提交流程元数据合并流程 CheckPointedits:日志的元数据fsImage :镜像的元数据1)snn会向namenode发送元数据是否合并的检查 1min检查一次2)namenode需要元数据合并 会向snn进行相应3)snn向namenode发送元数据合并的 请求4)namenode将正在编辑的元数据的日志...
2018-11-14 21:01:47
879
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅