StarCloud开源行动：激发算力调度的创新潜力

原创 已于 2024-05-14 11:03:57 修改 · 2.3k 阅读 · 12 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#开源 #算力调度 #大模型应用 #智能计算

于 2024-05-14 11:03:37 首次发布

01  关于StarCloud

OpenCSG StarCloud 是一个集开源系统(Kubernetes ,K8S)与高性能计算(High Performance  Computing,HPC)一体的混合算力调度平台。它专注于大模型训练和推理，并提供一站式服务，包括从训练到部署，以及多模型比较等。除了在人工智能领域的应用，StarCloud 在工程设计与仿真、金融和风险管理、药物研发和医学研究等多个领域也展现出其卓越的性能。

随着大模型应用的发展及落地，GPU 算力资源变得日益紧张，StarCloud提供了多样化的异构计算算力服务，旨在满足大模型应用和高性能计算的需求，致力于构建一个普惠、易用的算力服务平台。StarCloud的资源调度平台有效缓解这一问题，通过精细化管理大模型的调度过程，从而提高资源的利用率。此外，企业可以利用StarCloud部署自己私有化的平台，实现定制化的资源管理和调度，以满足特定的业务需求。

02  StarCloud 功能介绍

最低0.47元/天 解锁文章
OpenCSG
关注
开源算力引擎 BridgX 发布 0.6.0 版本：新增三种权限管理功能
Galaxy_Future的博客
02-17 1547
开源算力引擎 BridgX 推出 V0.6.0 版本，新增权限管理功能，分为 root、管理员和普通用户三种角色，可以帮助用户灵活地分配资源权限，保护云上资产。
浅谈AI+工业视觉检测技术应用的优化
m0_49711991的博客
08-23 1035
视觉是人类获取信息最主要的渠道，它使人们得以感知和理解周边的世界。通过视觉，人类可以感知外界物体的大小、明暗、颜色、动静，获得对机体生存具有重要意义的各种信息。人类的大脑皮层约有70%都在处理视觉信息，因此可以说视觉是人类最重要的感觉。机器视觉又称计算机视觉（CV），通过电子化的方式来感知和理解影像，让机器或计算机可以像人类那样“看”，甚至达到超越人类视觉智能的效果。随着工业自动化技术向着智能化方向演进，工业场景对计算机视觉技术的需求持续推进着工业机器视觉技术的发展。
PODsys：大模型AI算力平台部署的开源“神器”
浪潮圈
11-08 1691
PODsys是一个为客户提供智算集群系统环境部署方案的开源项目，具备基础设施环境安装、环境部署、用户管理、系统监控和资源调度等能力。用户只需执行两条简单的命令，即可完成大模型算力平台的部署，将大模型算力平台部署效率提升11倍，帮助用户顺利迈出大模型研发的第一步。（下载地址：https://podsys.ai/）
2025算力调度平台能力分析
最新发布
数据中心运维管理
11-16 63
的深度整合，目标是实现算力的“即插即用”和网络的“按需适配”，最终达成“网络无所不达、算力无所不在、智能无所不及”的愿景。（如CPU、GPU、FPGA、ASIC等）的计算单元，构建一个协同工作的系统，以充分发挥不同硬件架构的优势，提升整体计算性能、能效比和灵活性。跨区域、跨服务商、跨架构的异构算力资源；等）的计算单元，构建一个协同工作的系统，以发挥不同硬件架构优势，提升整体计算性能、能效比和灵活性。是一种面向多类型计算资源（CPU、GPU、存储、网络等）的统一调度系统，旨在实现资源的。
【保姆级选型指南】2025年国产开源AI算力平台怎么选？覆盖企业级_制造业_国际化场景
qq_29061315的博客
09-03 1950
国产GPU+开源+本地化部署+推理平台+国际化 AI平台
开源 | 推荐一套企业级开源AI人工智能训练推理平台（数算岛）：完整代码包含多租户、分布式训练、模型市场、多框架支持、边缘端适配、云边协同协议：
李文慧 中国开源充电桩平台第一人；李文慧 国内知名开源工作者 全栈工程师 华为云最具价值专家
08-27 1278
SSD-GPU-POOL是一个开源的GPU池化平台，提供AI全生命周期管理解决方案，支持训练加速、推理优化和资源调度。该平台解决了GPU资源利用率低（闲置率40%+）、多租户管理难、开发环境配置复杂等AI开发痛点。核心功能包括智能资源调度引擎（支持多型号GPU混合调度）、全流程AI开发管理（覆盖数据标注到推理部署）、企业级特性（分布式训练加速、可视化监控等）。技术架构包含开发环境、训练中心、资产中心和调度系统四大模块，兼容主流框架和硬件。平台已在自动驾驶、医疗AI等领域落地应用，显著提升资源利用率和训练效率
开源 | 数算岛 开源 智 算 平 台 （SSD-PAI）
李文慧 中国开源充电桩平台第一人；李文慧 国内知名开源工作者 全栈工程师 华为云最具价值专家
08-11 1667
提供统一、灵活、易用、全面的算力资源管理与调度策略，解决传统算力使用场景中算力资源碎片化、用户需求多样化、运维管理工作量大等问题。· 可整合零散、异构算力资源进行统一管理与调度，实现化零为整，提升算力资源整体利用率。· 为算力租户提供一个可伸缩、可定制、相对隔离且开箱即用的在线计算环境，用户可通过浏览器使用平台的完整功能。· 有效支撑用户研发过程闭环，提供数据准备→运行环境→训练/计算→成果归档/复用的研发全流程的环境/工具支持，促进智能生态蓬勃发展。
​推荐一个免费AI算力平台：OpenI​
风沙无痕的博客
08-22 3479
推荐非商业的​免费AI算力平台：OpenI，支持GPU、NPU算力，及Mindspore、Paddle、Pytorch、Tensorflow各大框架。 ​
Apache DolphinScheduler——开源大数据调度器神器（国人之光）
热门推荐
男神的专栏
05-31 1万+
本文已参与「新人创作礼」活动，一起开启掘金创作之路。
【源力觉醒 创作者计划】文心大模型开源：从封闭研发到生态共建的转折点
全沾软贱开发攻城狮
07-31 1万+
人工智能的浪潮在近几年席卷全球，不仅颠覆了传统技术路径与行业习惯，更在大模型领域掀起了一场激烈的生态争夺战。自去年起，"百模大战"的硝烟弥漫，微软、谷歌、百度、阿里等科技巨头纷纷入局，在大模型的研发与布局中各显神通。
【热门开源项目】阿里开源巨擘：Qwen-2 72B深度解析与推荐
weixin_51306394的博客
07-01 2686
在人工智能的浪潮中，开源模型如同璀璨的星辰，指引着开发者们探索未知的领域。而今天，我们将聚焦在阿里云推出的开源模型Qwen-2 72B上，从其项目介绍、技术特点、代码解析等多个角度，深入解析并推荐这一卓越的开源项目。
任务调度开源框架Quartz动态添加、修改和删除定时任务
07-07
Quartz 是个开源的作业调度框架，为在 Java 应用程序中进行作业调度提供了简单却强大的机制。Quartz框架包含了调度器监听、作业和触发器监听。你可以配置作业和触发器监听为全局监听或者是特定于作业和触发器的监听...
SweepRobot开源项目：扫地机器人的代码解析
4. 系统开源:系统开源指的是操作系统或者应用程序的源代码对外公开。在这种模式下，开发者可以自由地访问代码、修改和再发布，这有利于错误的发现和修正，同时促进了技术的快速迭代和创新。 5. 项目结构: ...
Chatterbox：Resemble AI 推出的突破性开源文本转语音引擎
ttsta的博客
06-17 7486
Chatterbox是ResembleAI推出的首个生产级开源TTS模型，采用MIT许可证，支持商业使用。其语音质量媲美商业闭源方案，独特之处在于首创开源情感控制功能，可精细调节语音情感强度。该模型适用于内容创作、游戏开发、AI交互等多种场景，具有生产就绪、性能可靠等特点。
开源 | 数算岛 智 算 平 台 （SSD-PAI）
李文慧 中国开源充电桩平台第一人；李文慧 国内知名开源工作者 全栈工程师 华为云最具价值专家
08-27 905
数算岛智算平台（SSD-PAI）是一款智能算力服务平台，提供统一管理和调度异构算力资源的解决方案。平台整合碎片化算力资源，支持云桌面、Jupyter、SSH等多种在线研发环境，实现"随时随地"访问。核心功能包括：全流程研发工具支持、灵活的资源配额管理、数据共享机制、多粒度GPU调度和应用中心。基于容器云架构，平台具有轻量、易用、灵活的特点，支持从数据准备到成果复用的完整研发闭环，促进科研协作和成果转化。项目已在Github开源（优先更新）。
openFuyao开源发布，建设多样化算力集群开源软件生态
BoCloud博云
05-28 1327
随着 AI 技术的高速发展，算力需求呈爆发式增长，集群已成为主流生产方式。在随后举办的openFuyao 专题论坛上，社区筹备委员会和技术委员会成员首次正式亮相，筹备委员会作为社区的领导机构，肩负着制定长期发展规划的重要使命，技术委员会作为社区的技术领导机构主导社区的技术发展方向，推动持续的技术创新，并致力于构建强大的技术影响力。随着 openFuyao 社区正式亮相，博云将在“基础使能与调度”、“AI”等方向继续深入参与社区的技术共建和社区贡献，积极承担委员会委员的责任和义务，为社区发展贡献力量。
AI算力中心GPU集群智能算力管控调度解决方案! 2025
m0_63171455的博客
07-20 1780
摘要：随着生成式AI大模型的爆发式发展，NVIDIA凭借其GPU技术成为最大赢家，市值突破4万亿美元。本文探讨了在Kubernetes容器平台上实现NVIDIA GPU智能算力管控的关键技术方案。通过整合NVIDIA GPU与K8S容器平台，构建高效的GPU算力调度系统，可解决当前大模型训练中"一卡难求"的困境。文章详细介绍了CUDA工具集、DevicePlugin机制等核心技术组件，以及Time-slicing、MPS和MIG三种GPU虚拟化方案的特点与适用场景。该方案通过K8S的资源
高性能计算的基石 - 简单易用的集群资源管理及作业调度系统
qq_21394345的博客
01-04 1438
Slurm是一个专为各种大小的Linux集群设计的开源。
基于go语言的开源调度系统整理
一点见解
11-23 7760
https://github.com/busgo/pink 通过Web界面管理操作简单方便，支持各种任务 高可用可以部署 n 台调度集群节点，保证没有单点故障。 部署简单、仅仅需要一个执行文件即可运行。 集成方便，统一语言无关的任务抽象，接入不同语言的sdk。 任务故障转移，任务客户端下线自动切至在线客户端任务机器。 https://github.com/labulaka521/crocodile 基于Golang开发的分布式任务调度系统，支持http、golang、pytho..
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值