Daphnis的博客

YARN可用的计算节点数量并不总是等于 Hadoop集群节点数量，可以根据业务需求分配 YARN计算节点数量。

回顾从前，已经在大数据领域混了5年了，经手了不少大数据集群搭建方案，自己也做过许多大数据平台的运维工作，在这里进行阶段性的总结，主要是 原生Hadoop、CDH、Ambari集群搭建对比。

CDH对 Kafka MirrorMaker的支持度不错，稳定性也能经得起时间的检验。另外，这种备份方式属于实时备份，很适合对数据完整性和及时性要求较高的项目，能最大程度地确保通过 kafka流转的数据的及时可用。还有一个好处是，当 kafka集群1因为某种原因无法工作时，可以迅速切换到集群2，且两个集群的数据几乎一致。

解决 Docker容器因 iptables无法启动的问题driver failed programming external..iptables: No chain/target/match by that name

1. 前言虽然互联网上已经有了多个公开的可以直接使用的 yum源，但是针对于内网（局域网）这种无法连接互联网，又需要安装维护多台服务器的场景，就需要搭建一个内网的共享 yum源了。此时，就会涉及如何搭建本地 yum源、从公开 yum源同步 rpm包，以及手动添加 rpm包等操作，这就是本文的主要内容。本文基于 CentOS7.9编写，应用场景为局域网多台服务器。2. 搭建多主机共享的 YUM源2.1 创建本地 YUM源这里使用 CentOS操作系统镜像文件作为本地 yum源的基础 rpm包。

1. 前言最近入坑 NLP 了，开始正儿八经玩 Python ，那么 pip 的使用就必须要掌握了。2. 修改 Pip 仓库地址为国内源这个跟 maven 一样如果使用默认的国外仓库，很多时候速度感人 …如果想按时下班，那么更换国内源是必须的。国内常用的 Pip 地址仓库如下：阿里云， http://mirrors.aliyun.com/pypi/simple/中国科技大学， https://pypi.mirrors.ustc.edu.cn/simple/清华大学， https://pypi

1. 序言市面上有很多的 Git 第三方界面管理工具，为何选择小乌龟（TortoiseGit）呢？可以先看下面的截图：操作简单，功能强大，用了之后其他的 Git 管理工具就不太习惯了…2. 文件准备需要的文件如下，第三个语言包可选：下载地址如下：Git 官网下载页面TotoriseGit 官网下载页面喜欢中文菜单码友的可以把中文语言包一起下载下来。补充：通常官网下载很慢，下不动可以用迅雷试试。另外贴一下某网盘的连接，方便下载：​ 链接：https://pan.baidu.