数据与算法架构提升之路专栏

使用Kubernetes部署PyTorch框架实现分布式训练和部署，并结合Kubeflow构建端到端的机器学习管道，是一个高效、可靠且可扩展的解决方案。它充分利用了Kubernetes的容器编排能力和Kubeflow的机器学习工具链优势，为机器学习模型的训练与部署提供了全流程的自动化支持。

服务器选择：托管IDC、混合云、公有云，基于需求、预算、技术能力和业务目标。

Argo CD 是用于 Kubernetes 的声明性 GitOps 连续交付工具。

为什么要使用Docker Compose可以使用Dockerfile(或Maven)构建镜像，使用微服务架构的应用系统一般包含若干个微服务，每个微服务一般有多个实例。如果每个微服务都要手动启停那么维护成本会非常高安装Compose方法一：# curl -L https://github.com/docker/compose/releases/download/1.8.1/docker-compose-`uname -s`-`uname -m` > /usr/local/bin/doc

一、进程分组之CGroupCGroup 是 Control Groups 的缩写，是 Linux 内核提供的一种可以限制、记录、隔离进程组 (process groups) 所使用的物力资源 (如 cpu memory i/o 等等) 的机制。2007 年进入 Linux 2.6.24 内核，CGroups 不是全新创造的，它将进程管理从 cpuset 中剥离出来。简单来说CGroup 是...

Docker-Compose Docker Swarm和Kubernetes的区别Docker-ComposeDocker-Compose 是用来管理你的容器的，有点像一个容器的管家，想象一下当你的Docker中有成百上千的容器需要启动，如果一个一个的启动那得多费时间。有了Docker-Compose你只需要编写一个文件，在这个文件里面声明好要启动的容器，配置一些参数，执行一下这个文件，D...

容器访问控制容器的访问控制，主要通过 Linux 上的 iptables 防火墙来进行管理和实现。 iptables 是Linux 上默认的防火墙软件，在大部分发行版中都自带。容器访问外部网络容器要想访问外部网络，需要本地系统的转发支持。在Linux 系统中，检查转发是否打开。$sysctl net.ipv4.ip_forwardnet.ipv4.ip_forward = 1...

背景：现在很多公司一般分为开发，测试，预发，生产等环境，除了生产其他环境出现一点小问题都要通过查询日志的形式来定位问题非常的费时费力影响开发效率。鉴于很多公司都采用了SpringBoot+Docker的形式来部署微服务，本文提出一套实际可以大大节省排查和定位问题所需时间的方法——远程调试代码1、DockerFile文件FROM maven:3-jdk-8-alpineMAINTA...

1、centos镜像的二次封装docker build -t csphere/centos:7.1 .docker build -t csphere/centos:7.1 .FROM centos:centos7.1.1503MAINTAINER Carson,C.J.Zeong <zcy@nicescale.com>ENV TZ "Asia/Shan...

首先看张Docker架构图DockerFile常用指令CMD 与 ENTRYPOINT 的区别ENTRYPOINT 的目的和 CMD 一样，都是指定容器的启动程序及参数。ENTRYPOINT 在运行时也可以通过 docker run 的参数 --entrypoint 来替代镜像中默认的ENTRYPOINT，通过 --entrypoint 传的必须是可执行的二进制程序， 即不会以...

centos6.5下(安装的docker最高好像只能到13）一、升级内核到3.10.51安装kernel包rpm -ivh kernel-ml-aufs-devel-3.10.5-12.1.x86_64.rpmrpm -ivh kernel-ml-aufs-3.10.5-3.el6.x86_64.rpm2修改/etc/grub.conf并重启vim /et...