开源公告|运维基础操作管理系统-蓝鲸作业平台正式开源!

蓝鲸作业平台,一套运维基础操作管理系统,现正式开源。它支持脚本执行、文件分发、定时任务及自动化作业流程。采用微服务设计,具备高可用、高并发任务执行能力,并支持第三方文件源扩展和高危指令检测,广泛应用在腾讯IEG,日执行作业量庞大。开发者可访问GitHub或腾讯工蜂获取源码,参与贡献。

蓝鲸作业平台项目背景

蓝鲸作业平台是一套运维基础操作管理系统,具备海量任务并发处理能力;除了支持脚本执行、文件分发、定时任务等一系列基础运维场景以外,还支持通过流程调度能力将零碎的单个任务组装成一个自动化作业流程;而每个作业都可做为一个原子节点,提供给上层或周边系统/平台使用,实现调度自动化。

技术亮点 

1. 微服务无状态设计

服务划分清晰,支持横向扩容;基于业界成熟的Spring Cloud微服务框架,提供了完善的分布式配置中心、服务发现、负载均衡、熔断限流、调用链追踪等能力。

2. 高可用、高并发任务执行引擎

分布式执行引擎,能够支持每秒1000+的任务;弹性设计,通过限流与自适应加载方案,保障了引擎的高可用;任务检测机制,保障意外终止的任务恢复执行。

3. 支持第三方文件源扩展

文件分发来源支持插件化扩展,除分发本地文件与服务器文件以外,当前已对接腾讯内部COS、制品仓库等作为第三方文件源,具备高扩展性。

4. 支持高危指令检测能力

支持API级别的高危指令检测能力,通过正则表达式配置高危语句规则,实时记录并拦截高危指令操作,为业务服务器安全保驾护航。

5. 丰富的平台管理能力

支持平台信息/配置定制化、运营数据统计、微服务无损更新与服务状态监控,为快速迭代提供支持。

行业应用

蓝鲸作业平台在腾讯IEG内部广泛使用,为上千个业务提供了运维作业执行服务,日执行作业量达到千万级别;同时,作为蓝鲸的原子平台之一,拥有大量社区用户,在业界拥有一定的影响力。

开源获取

G

蓝鲸作业平台(Job)是一套运维脚本管理系统,具备海量任务并发处理能力。除了支持脚本执行、文件分发、定时任务等一系列基础运维场景以外,还支持通过流程调度能力将零碎的单个任务组装成一个自动化作业流程;而每个作业都可做为一个原子节点,提供给上层或周边系统/平台使用,实现跨系统调度自动化。 ## Benefits ### 安全可靠的高危命令检测能力 作为底层面向服务器OS的原子操作平台,对用户操作指令是否合规、安全的检测至关重要!作业平台支持通过正则表达式设置各种不同脚本语言的高危命令语句检测规则,并且提供被阻拦的操作日志;即便是周边系统通过 API 形式调度执行,也能够被实时检测拦截,让服务器操作更安全! ### 完善的脚本版本管理 云化脚本版本管理模式,贴合现代化开放协同的理念,协作者之间借助平台便捷的共享脚本资源;利用版本管理功能,您可以很好的控制版本的上/下线状态,并能够在出安全漏洞时快速禁用、及时止损! ### 作业编排,一切皆场景 当一个操作场景需要多个步骤串联执行时,如果手工一个个去点击执行,那么效率实在太低了!并且,也没办法很好的沉淀下来,方便后续持续使用和维护。 作业平台作业管理功能很好的解决了这个问题,用户可以在「作业模板」中配置好相应的执行步骤,然后再根据需求场景衍生对应的「执行方案」;如此,即清晰的区分开作业模板和实例的关系,避免强耦合关系,也便于后续对使用场景的管理和维护。 ### 原汁原味的 Cron 定时任务 保留了 Linux 原生的 Crontab 定时任务使用习惯,让运维同仁能够更平滑、快速的上手;更有贴心的监测功能助您发现及时掌握定时任务的动向和执行情况。 ### 高扩展性的文件源管理能力 在文件分发的需求场景中,我们除了从远程服务器、本地文件作为传输源以外,还可能需要从对象存储、FTP、Samba等不同的文件系统/服务获取文件; 为了满足这种多元化的文件源对接诉求,我们开放了文件源插件的能力,支持开发者根据自己的文件系统类型开发插件对接作业平台的文件源管理模块,从而实现从不同文件系统分发的能力。 bk-job 提供了快速执行、任务编排、定时执行等核心服务,多重组合,满足企业不同场景的需求: - **快速执行**:提供临时性且多变的快速一次性操作入口,用完即走 - **任务编排**:对于重复性的操作组合,可以通过编排功能将其沉淀为“作业”,方便管理和使用 - **定时执行**:支持用户按业务逻辑诉求设置周期性或一次性的定期执行计划 - **脚本管理**:将脚本以云化模式统一管理,更好的支持作业编排和周边系统调度的灵活度 - **账号管理**:管理服务器OS的执行账户,如Linux的 root,Windows的 administrator 等等 - **消息通知**:满足业务按管理需求设置任务不同状态的执行结果消息通知 - **文件源管理**:开放文件源对接插件能力,满足从不同文件系统类型拉取文件并传输的诉求 - **运营分析**:提供平台的运营统计数据展示,助力管理员更全方位的了解平台的运行情况 - **平台管理**:丰富的平台管理员工具,包括但不仅限于信息更改、消息渠道设置、高危语句检测规则、功能限制设置、公共脚本管理、后台服务状态展示等等
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值