【云星数据---mesos实战系列002】：mesos全分布式部署实战007--mesos集成docker方案

最新推荐文章于 2017-12-05 16:52:16 发布
原创 最新推荐文章于 2017-12-05 16:52:16 发布 · 8.2k 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#技术 #数据 #分布式

一、让mesos支持docker技术

    1.配置所有mesos-slave
        echo 'docker,mesos' | tee /etc/mesos-slave/containerizers
        echo 'docker' | tee /etc/mesos-slave/image_providers
        echo '10mins' > /etc/mesos-slave/executor_registration_timeout
        echo 'filesystem/linux,docker/runtime,cgroups/cpu,cgroups/mem' | tee /etc/mesos-slave/isolation
        echo '/var/run/docker.sock' |</
最低0.47元/天 解锁文章
Mesos集群：2个Linux agent和1个Windows agent
每一天都有新的希望
11-16 2063
Mesos集群：2个Linux agent和1个Windows agent
【云星数据---mesos实战系列002】：mesos全分布式部署实战009--修改marathon的默认端口
云星数据-http://www.cloud-star.com.cn
11-10 8634
一、修改marathon的默认端口因为marathon的默认端口是8080，我们自己的服务端口也是8080因此需要改动， Marathon WebUI默认的端口是8080，修改端口的方法： 1.编辑配置文件 编辑命令 vim /etc/default/marathon 添加内容 export HTTP_PORT=8081 export
【云星数据---mesos实战系列002】：mesos全分布式部署实战003--zookeeper全分布式部署准备
云星数据-http://www.cloud-star.com.cn
11-09 8241
一、zookeeper部署的原因我们后续想通过zookeeper来实现mesos的master节点的HA(High Available) 因此必须安装zookeeper。当然zookeeper在大数据生态圈中作用广泛。像Hadoop， Hbase,spark,kafka,flink等分布式系统都依赖zookeeper来做集群的状态管理。 因此zookeeper算是一种基础的组件。二、zookeepe
关于Mesos Agents出现Deactivated状态问题的排查
B.I.T
01-20 2497
最近新初始化了几台mesos agent节点，将其接入之前的mesos master。mesos master的界面能看到agents已经连接上的信息，但是节点的连接状态分分钟就在变化： Registered时间始终是a minute age，生成的agent id也是不断的在变化。在Mesos界面的Agents状态栏里看到： Deactivated的表示是无效的，说明这4台agent是
【云星数据---mesos实战系列002】：mesos全分布式部署实战004--docker全分布式部署准备
云星数据-http://www.cloud-star.com.cn
11-10 8152
一、docker部署原因为了使用mesos+marathon管理docker微服务，我们需要补水docker。为了简单起见我们还是以yum的方式进行部署。 凡是需要运行容器的地方都要部署docker。 bigdata03 master bigdata04 slave bigdata05 slave 二、docker部署方法 0.升级 yum -y u
【云星数据---mesos实战系列002】：mesos全分布式部署实战005--docker-register部署准备
云星数据-http://www.cloud-star.com.cn
11-10 8123
一、docker私有仓库部署原因我们要有一个统一的地方来完成对docker镜像的管理。docker社区提供的docker-register是一个不错的工具。现在我们先尽快的将 环境建设起来，如果考虑后续的企业级应用可以考虑使用habor进行替换。敬请关注后续关于habor的文章二、搭建docker私有仓库 1.安装并启动docker yum -y install docker.
【云星数据---mesos实战系列002】：mesos全分布式部署实战006--mesos全分布式部署方案
云星数据-http://www.cloud-star.com.cn
11-10 8158
一、mesos部署参考链接如下： http://www.linuxidc.com/Linux/2017-03/141478.htm http://www.xuliangwei.com/xubusi/422.html http://www.mamicode.com/info-detail-1948163.html http://www.cnblogs.com/ee900
【云星数据---mesos实战系列003】：marathon实战007--marathon部署一个docker register
热门推荐
云星数据-http://www.cloud-star.com.cn
11-11 1万+
marathon部署一个docker register1.要求： 成功部署一个docker register 暂时还不能实现重启容器数据不丢,如果要保障重启容器数据不丢失，那就要使用volume进行外部存储。2.实现：cat marathon.json { "id": "/bigdata-base-services/registry", "cpus": 1, "mem": 256,
【云星数据---mesos实战系列】：marathon实战Constraints篇-002
云星数据-http://www.cloud-star.com.cn
12-05 851
CLUSTER operatorCLUSTER allows you to run all of your app’s tasks on slaves that share a certain attribute. This is useful for example if you have apps with special hardware needs, or if you want to r
【云星数据---mesos实战系列】：marathon实战Constraints篇-003
云星数据-http://www.cloud-star.com.cn
12-05 1655
GROUP_BY operatorGROUP_BY can be used to distribute tasks evenly across racks or datacenters for high availability.$curl -v -X POST http://192.168.100.30:8080/v2/apps \ -H Content-Type:application/j
【云星数据---mesos实战系列003】：marathon实战002--marathon部署http版的hello world应用
云星数据-http://www.cloud-star.com.cn
11-10 8100
要求： 用nc命令启动一个HTTP服务 方案： 1.在各节点上安装netcat,使用这个工具进行测试 yum install nmap-ncat 2.在Marathon页面，点击“Create Application”创建任务 cat test002.json { "id": "netcat", "cmd": "while true; do ( echo 'HTTP/1
【云星数据---mesos实战系列003】：marathon实战009--marathon部署一个springboot应用
云星数据-http://www.cloud-star.com.cn
11-11 8457
marathon部署一个springboot应用1.要求：为了实现微服务，我们可以采用springboot的实现方式。因此要部署一个springboot应用。2.实现： 1.实现一个springboot的程序,这部分可以关注本博客的有关springboot的章节 2.将其打包成docker image 并上传到私有镜像 cat DockerflieFROM frolvlad/alp
【云星数据---Apache Flink实战系列(精品版)】：Apache Flink实战基础0013--flink分布式部署008
云星数据-http://www.cloud-star.com.cn
11-14 1387
FlinkOnYarn模式下集群最简部署实战一、配置yarn1.编辑yarn-site.xml1.编辑命令 vim ${HADOOP_HOME}/etc/hadoop/yarn-site.xml2.配置内容 <property> <name>yarn.nodemanager.vmem-pmem-ratio</name> <value>4</value> </propert
【云星数据---mesos实战系列003】：marathon实战006--用marathon部署一个ubuntu应用
云星数据-http://www.cloud-star.com.cn
11-11 1万+
用marathon部署一个ubuntu应用1.要求：用marathon部署一个ubuntu应用，每一秒向mesos的sandbox输出一次当前时间2.方案：cat ubuntu.json{ "id": "ubuntu-marathon", "instances": 2, "cpus": 0.5, "mem": 256, "uris": [], "cmd": "while tr
【云星数据---mesos实战系列003】：marathon实战008--marathon部署一套最简单的前端程序
云星数据-http://www.cloud-star.com.cn
11-11 1万+
marathon部署一套最简单的前端程序 1.要求： 成功部署一个index.html到Nginx. 2.实现： 1.建立一个最简单的web工程 first-portal，目录结构如下： 说明： index.html是主要的入口文件。 images中存储的是index.html中使用的图片（用于测试） Dockerfile是改工程的doc
【云星数据---mesos实战系列003】：marathon实战003--marathon部署一套最简单的Nginx环境
云星数据-http://www.cloud-star.com.cn
11-10 8302
marathon部署一套Nginx环境要求： Marathon有自己的REST API，我们通过API的方式来创建一个Nginx的Docker容器。方案： 首先创建如下的配置文件nginx.json cat nginx.json { "id":"nginx", "cpus":0.2, "mem":32.0, "instances": 1, "constraints
云星数据---mesos实战系列003】：marathon实战001--使用marathon部署一个最简单的容器服务
云星数据-http://www.cloud-star.com.cn
11-10 8230
一、marathon最简单的hello world应用要求： 部署一个打印语句,输出将在stdout的日志中查看. 方案： cat test001.json{ "id": "hello", "cmd": "while [ true ] ; do echo 'Hello Marathon' >> /cloudstar/hello.txt; sleep 1; done", "cpus":
【云星数据---mesos实战系列003】：marathon实战004--marathon部署一套Tomcat环境（精简代码版）
云星数据-http://www.cloud-star.com.cn
11-11 8203
marathon部署一套Tomcat环境（精简代码）1.要求： 成功部署Tomcat,t通过浏览器能够访问Tomcat的页面。目的是测试Tomcat在marathon中的管理方式，为后续微服务做知识探索。2.实现：首先编辑marathon部署所使用的json文件，文件内容如下：cat tomcat.json{ "id": "tomcat", "cpus": 1, "mem": 128,
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值