
大数据
m风之伤
这个作者很懒,什么都没留下…
展开
-
docker的使用之 安装mysql 镜像
docker的使用之 安装mysql 镜像 下载MySQL的镜像 docker pull mysql 查看当前docker中的镜像 docker images 运行镜像生成新的容器 docker run -p 3306:3306 --name mymysql -v $PWD/conf:/etc/mysql/conf.d -v $PWD/logs:/logs -v $PWD/data:/va...原创 2019-10-23 11:27:44 · 286 阅读 · 0 评论 -
centos7 安装docker
centos7 安装docker按照centos7配置centos7的基本配置修改网卡的配置关闭防火墙关闭selinux修改主机名配置yum源(yum的软件仓库)安装Docker卸载已经安装的Docker添加阿里镜像查看可以安装的docker版本合理的创建标题,有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右Smart...原创 2019-10-22 18:11:57 · 588 阅读 · 0 评论 -
hadoop mapreduce卡住解决方案
如何杀掉当前正在执行的hadoop任务列出当前hadoop正在执行的jobs:杀掉job: job_201212111628_11166 列出当前hadoop正在执行的jobs: [hadoop@192.168.10.11 hadoop-0.20.2-cdh3u3]$ hadoop job -list 10 jobs currently running JobId State Start...转载 2018-12-30 17:54:44 · 695 阅读 · 0 评论 -
zookeeper 在kafka中的作用是什么?
Kafka使用zk的分布式协调服务,将生产者,消费者,消息储存(broker,用于存储信息,消息读写等)结合在一起。同时借助zk,kafka能够将生产者,消费者和broker在内的所有组件在无状态的条件下建立起生产者和消费者的订阅关系,实现生产者的负载均衡。 1. broker在zk中注册 kafka的每个broker(相当于一个节点,相当于一个机器)在启动时,都会在zk中注册,告诉zk其br...转载 2019-02-20 16:48:46 · 2136 阅读 · 1 评论 -
优化hbase的查询优化-大幅提升读写速率(转)
问题导读: 1.本文通过什么方法优化查询效率的? 2.如何增大RPC数量? 3.如何调整hbase内存?环境:suse8G内存,8核,12T磁盘 hbase master 占一台,其他7台作为hbase的region注意:此处不讨论hadoop情景: 我们有7亿的数据,需要做查询操作,需要从1.7亿的表中查找一个字段,并写入到7亿数据的表中。 ...转载 2019-03-02 15:48:11 · 451 阅读 · 0 评论