dcoker-flink部署

最新推荐文章于 2025-04-14 14:07:23 发布

niuswang

最新推荐文章于 2025-04-14 14:07:23 发布

阅读量354

点赞数

CC 4.0 BY-SA版权

文章标签： flink docker

本文链接：https://blog.youkuaiyun.com/niuswang/article/details/86680018

本文介绍了如何在Docker环境下部署Flink。通过配置flink.yml文件，可以访问http://localhost:8081的web UI来提交job至session模式。同时，提供了通过命令行提交任务的方法，需要将JAR包拷贝到JobManager容器内。若在container中执行vim显示command not found，可以执行apt-get update和apt-get install vim进行安装。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

flink.yml

version: "3.2"
services:
  jobmanager:
    image: ${FLINK_DOCKER_IMAGE_NAME:-flink}
    expose:
      - "6123"
    ports:
      - "8081:8081"
    command: jobmanager
    environment:
      - JOB_MANAGER_RPC_ADDRESS=jobmanager

  taskmanager:
    image: ${FLINK_DOCKER_IMAGE_NAME:-flink}
    expose:
      - "6121"
      - "6122"
    depends_on:
      - jobmanager
    command: taskmanager
    links:
      - "jobmanager:jobmanager"
    environment:
      - JOB_MANAGER_RPC_ADDRESS=jobmanager

docker stack deploy -c flink.yml flink
docker service ls
docker service scale flink_jobmanager=1
docker service scale flink_taskmanager=2

任务运行后，可以通过http://localhost:8081访问 web UI。

1.可以通过 web UI 来把一个 job 提交 session 模式中。(jobmanager)

2.通过命令行来提交一个 session，则必须把 JAR 包拷贝到 JobManager container 上，然后在上面提交任务

 $ JOBMANAGER_CON

最低0.47元/天解锁文章

200万优质内容无限畅学