- 博客(4)
- 收藏
- 关注
翻译 大数据面试小结
目前面试了多家大数据开发工程师,成长了很多,也知道了很多知识,下面和大家分享一下我遇到的面试题和答案。1.kafka集群的规模,消费速度是多少。答:一般中小型公司是10个节点,每秒20M左右。2.hdfs上传文件的流程。答:这里描述的 是一个256M的文件上传过程① 由客户端 向 NameNode节点节点 发出请求②NameNode 向Client返回可以可以存数据的...
2019-05-20 10:51:28
149
翻译 hive常用函数
参考地址:https://cwiki.apache.org/confluence/display/Hive/LanguageManual+UDF 1.parse_url(url, partToExtract[, key])解析URL字符串,partToExtract的选项包含[HOST,PATH,QUERY,REF,PROTOCOL,FILE,AUTHORITY,USERINFO]...
2019-05-20 10:45:43
150
原创 解决Zookeeper无法启动的问题
1.检查jdk是否正确安装:java或java -version2.检查防火墙是否关闭:service iptables status 如果显示运行,关闭防火墙:service iptables stop3.检查zookeeper的配置文件zoo.cfg是否配置正确,尤其虚拟机主机,对应端口是否正确4。检查各台虚拟机的myid是否正确:echo x > myid(x为设定的id,与zoo.c...
2018-07-03 22:02:28
4725
翻译 yum本地源制作
yum本地源制作1准备一台linux服务器,用最简单的版本centOS-6.7-x86_64-minimal.iso2配置好这台服务器的地址3上传centOS-6.7-x86—64-bin-DVD1.iso到服务器4将centOS-6.7-x86—64-bin-DVD1.iso镜像挂载到某个目录mkdir /var/isomount -o loop cent -6.7-x86_bin-dvd1.i...
2018-06-27 23:24:24
168
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人