DigitalOcean 托管 Kafka 新增横向扩展功能

原创 已于 2024-04-30 08:58:36 修改 · 1.1k 阅读 · 18 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#kafka #分布式 #云计算 #容器

于 2024-04-25 10:22:20 首次发布
DigitalOcean宣布其托管Kafka服务新增横向扩展功能，允许客户根据需求添加更多节点和存储，以处理不断增长的数据量和流量。该功能提高了性能、容错能力和资源利用率，适合应对实时数据需求的云端业务。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

自2023年9月推出以来，DigitalOcean托管的Kafka已经使初创公司、不断增长的数字业务以及独立软件供应商(ISV)能够改善实时数据处理和分析，从而做出更具洞察力的决策。在新的一年里，我们很高兴地宣布DigitalOcean托管Kafka的横向扩展功能，让我们的客户能够处理不断增长的数据量和流量，提高集群的可靠性，并优化资源。有了这个新功能，客户可以根据波动的工作负载需求正确配置节点/代理。

轻松调整您的Kafka存储

通过可伸缩存储，您现在可以通过一个简单的设置添加更多存储空间。每个节点以10 GB增量轻松添加磁盘存储，每增加一个增量的价格仅为每月2美元。可以将其视为逐个向您的Kafka集群添加数据桶，以实现完美匹配。

可伸缩存储的功能包括：

  • 增加磁盘存储容量：所有Kafka计划现在都提供一系列磁盘存储选项，可用于启动新计划或升级现有计划。可用存储的最小量可以从起始量增加两倍至五倍。

  • Kafka集群现在具有更多存储：Kafka集群现在可扩展到1.5 TB的存储，使用户能够未雨绸缪地部署Kafka，并确保其能够处理大型生产工作负载。

  • 在几分钟内快速启动一个集群：通过UI、CLI或API快速配置高可用性的Kafka集群，仅需几分钟即可完成。节省时间并减少设置和连接节点以及独立的ZooKeeper节点所需的操作开销。Apache ZooKeeper是一款开源软件，可以实现高度可靠的分布式协调。它通常用于分布式系统中管理配置信息、命名服务、分布式同步、仲裁和状态。分布式系统经常依赖于ZooKeeper来实现共识、领导者选举和群组管理。

横向扩展您

最低0.47元/天 解锁文章

200万优质内容无限畅学
博客
如何开发一个用AI一键生成行程+查航班+订住宿的旅行App？（附开源代码）
07-16 703
如果一切都在变得智能化，那为什么旅行不能变得更智能呢？正是带着这种想法，我开始了（下图为产品页面）的开发。旅行不仅仅是预订机票和去美丽的地方，你还需要查找签证信息、制定行程、研究文化、寻找住宿地点，以及做更多的事情。Nomado 解决了所有这些问题，而这些功能中的每一个都得到了​ DigitalOcean 的 GradientAI 平台的支持 ​。在这篇文章中，我们将看到如何构建 AI 驱动的应用程序来自动化无聊的部分。在深入了解“如何”之前，让我们先了解 GradientAI 平台及其功能。
博客
AI 训练/推理提速：海外裸金属 GPU 云平台选型指南
07-11 1885
需要访问底层 NVLink、MPS、GPU 转发等能力的团队。
博客
DigitalOcean GradientAI：从基础设施到应用，打造全栈式AI开发解决方案
07-11 1090
DigitalOcean 始终专注于提供简单、强大的基础设施，帮助数字原生企业构建和扩展其应用程序。在过去的一年里，我们将这一承诺延伸到人工智能领域，投资于计算、工具和工作流程，使开发者能够更轻松地从头开始构建人工智能应用。DigitalOcean 相信，要真正释放人工智能的价值，开发者需要的不仅仅是基础设施，他们需要一个贯穿整个开发生命周期的集成体验。因此，我们将 GPU 基础设施、AI Agent开发和预构建的人工智能应用程序整合到一个统一的平台中。
博客
AI 推理 GPU 终极指南：RTX 4000 Ada、RTX 6000 Ada、L40s 与 A100 如何选？
07-07 2171
在过去两年里，我们见证了人工智能模型规模的爆炸式增长。这不仅仅是技术突破，更意味着 AI 推理已从实验室里的“研究场景”大步迈入了“业务落地”的广阔天地。从智能客服机器人到文生图应用，再到复杂的视频理解，几乎所有令人惊叹的新产品背后，都离不开强大的 GPU 推理算力作为支撑。对于许多正在加速产品落地的团队而言，选择一张既高效又兼具成本效益的推理显卡，无疑是决定产品上线周期和服务稳定性的关键一步。 然而，面对市场上琳琅满目的 GPU 型号，从大家熟悉的消费级卡（如 RTX 4090）到专为数据中心设计的专业卡
博客
大流量业务云主机选型：AWS、Oracle、DigitalOcean、Linode、阿里云深度对比
07-04 1632
数字化增长时代，选对海外云基础设施是成败分水岭。无论你正在运营一款广告平台、实时推荐引擎，还是跨境电商服务，找到既能满足大流量业务需求，又能兼顾可控成本的云主机，都是长期竞争力的关键。在众多选择中，DigitalOcean以其简洁、清晰和可靠的特性，越来越多地成为开发者和高流量业务团队的信赖之选。未来，当你再为“怎么兼顾性能与成本”而头疼时，不妨把它列入你的重点备选清单。
博客
海外 AI 部署：中国出海企业如何选择稳定、安全的云 GPU 基础设施？
06-27 1793
AI 出海，听起来是技术全球化，其实落地就是资源全球化。模型是否稳定运行、服务是否响应快速、部署是否合规安全，这些都取决于背后的基础设施选型。与其在功能复杂、价格高昂的大平台中挣扎，不如试试像 DigitalOcean 这样的更轻量、更聚焦、更适配出海业务的云 GPU 平台。训练成本已经压缩到了万元以内，是时候让部署成本也“配得上”国产大模型的潜力了。如需进一步了解详情，可直接点击下方链接联系DigitalOcean中国区独家战略合作伙伴卓普云。
博客
MI300X vs H100：DeepSeek 部署在哪个 GPU 上性价比最高？
06-25 1782
从 DeepSeek 不同版本的实际资源需求出发，结合这两款 GPU 的性能和定价，来分析一下在哪些使用场景下选择 MI300X 更划算，而哪些情况下用 H100 更值得。
博客
DigitalOcean 助力 SonarHome 实现房地产平台AI智能化升级
06-24 712
SonarHome 是一家通过 AI 驱动的在线平台，提供免费房屋估价并直接或通过合作中介帮助用户快速、安全地出售公寓。SonarHome 由首席执行官 Mateusz Romanowski 和首席技术官 Piotr Chmolowski 于 2019 年联合创立。Mateusz 本身是一位成功的创业者，在波兰华沙购买人生第一套房产的过程中，他亲身体会到房地产行业亟需创新。于是，他与 Piotr 一同开发了一款工具，为东欧地区的购房者提供准确的房屋估值服务。
博客
做大模型训练与AI推理，GPU服务器哪个便宜好用？
06-24 943
无论是需要训练千亿参数级的大型语言模型（LLM），还是运行对成本敏感的高效推理任务，高性能且易于管理的GPU资源是你成功的基石。DigitalOcean是海外知名的上市云服务平台，除了提供常见的云服务产品，还汇集了行业领先的AMD和NVIDIA的顶尖GPU产品。选择DigitalOcean的GPU Droplet，你不仅获得了强大的硬件，更享有便捷、灵活且安全的一站式云服务体验。对于需要高效推理、图形渲染或虚拟工作站，同时又对成本敏感的项目，以下GPU Droplet提供卓越的性能与价值平衡。
博客
利用HuggingFace一键模型部署功能，快速构建语音助手
06-18 1373
1-Click Models（即一键模型部署功能）是由DigitalOcean与Hugging Face联合推出的新方案，旨在通过云端最强大的GPU轻松调用顶尖开源大语言模型（LLMs）。用户无需复杂配置即可直接使用最佳模型。本教程将指导您开发一个支持语音功能的个人助手应用，该应用基于Gradio框架并集成FastAPI。您将学习如何：wp:list/wp:list。
博客
DigitalOcean 携手 AMD 推出 AMD Instinct™ MI300X GPU Droplet，加速 AI 创新
06-18 756
近日，DigitalOcean（NYS:DOCN）作为全球最简单易用的可扩展云平台，宣布与 AMD 建立合作，为 DigitalOcean 客户提供 AMD Instinct™ GPU，以 AMD Instinct™ MI300X GPU Droplet 的形式支持其 AI 工作负载。此举将能更好地推动人工智能（AI）、机器学习（ML）和高性能计算（HPC）领域的发展。
博客
如何优雅地玩转 AIGC？DigitalOcean 开发者沙龙全记录
06-11 1645
摘要：6月7日，卓普云与DigitalOcean在北京联合举办首届"AIGC开发者沙龙"，聚焦AI训练与推理技术。活动邀请5位行业专家分享：JuiceData介绍分布式存储系统在AI全流程的应用；商汤科技探讨企业级RAG性能优化方案；WaveSpeedAI展示多模态生成引擎技术；NebulaGraph讲解GraphRAG构建知识库；DigitalOcean专家解析AI算力架构设计。100余位从业者参与交流，共同探讨AI开发实践与前沿趋势。
博客
巧用 MCP 服务器，让你几分钟从 Prompt 到应用部署
05-21 3076
MCP 是 Model Context Protocol（模型上下文协议）的缩写。它是一种让基于大语言模型（LLM）的工具（如 Claude 或 Cursor）能够安全地与外部服务通信并执行实际操作的方法。LLM 擅长处理“文字”——它可以总结、解释、改写文本。但如果没有帮助，它自己是无法“做事”的。比如它不能自动帮你部署应用、查询数据库，或者回滚失败的版本。而 MCP 就是这个“帮助”。它是一个开放协议，定义了工具如何以一种可预测、结构化的方式向 AI 模型暴露能力。
博客
教程：通过 Droplet 自动伸缩池实现工作负载自动扩展
05-20 991
在本教程中，你将通过实际示例了解自动伸缩的重要性，学习如何使用 DigitalOcean 用户界面 (UI) 和命令行界面 (CLI) 设置 Droplet 自动伸缩池，配置伸缩规则和阈值，优化自动伸缩的最佳实践，监控性能和基准测试伸缩效率，进行负载测试以模拟真实的流量高峰并观察自动伸缩的实际效果，确定正确的自动伸缩池大小，以及有关 DigitalOcean 自动伸缩的常见问题解答。通过遵循本教程，你可以有效地配置自动伸缩、优化性能，并在无需人工干预的情况下确保流量高峰期间的平稳运行。
博客
Qwen3 不同版本需要什么 GPU？以及如何部署？
05-12 5035
Qwen3是一个特别令人兴奋的模型，因为它能够在思考和非思考模式之间无缝切换，并具有创新的代理能力。我们期待看到越来越多像Qwen3这样的模型发布，以进一步推动大型语言模型的发展。最后，如果你在寻找价格实惠、计费透明、性能稳定且开发者友好的GPU服务器，​ 欢迎进一步了解DigitalOcean GPU Droplet，详情可点击下方链接咨询DigitalOcean中国区独家战略合作伙伴卓普云AI Droplet。​。
博客
从7B到671B：DeepSeek R1大模型微调的GPU选型终极指南
05-08 3239
当 DeepSeek R1 系列以 7B 到 671B的参数跨度构建起完整技术栈时，微调场景的硬件选择已演变为一场精密的数学游戏。以 FP16 精度计算，7B 模型微调需要至少 14GB显存（含优化器状态），而 671B 版本则需要惊人的 3TB 级存储空间。这种指数级增长不仅考验硬件工程师的决策能力，更揭示了算力投资的核心法则：选错 GPU 的代价，远不止于训练失败——轻则增加 30% 推理延迟，重则造成百万级硬件成本的浪费。
博客
企业出海降本：如何将应用从 AWS EC2 快速无缝迁移至DigitalOcean Droplet
04-29 3163
在本教程中，我们已经带着你一步步将运行中的应用从 AWS EC2 迁移到 DigitalOcean Droplet —— 从评估现有环境、创建和配置 Droplet，到传输文件和数据库、测试和更新 DNS，实现最小化停机时间的平滑切换。此过程能帮助你降低云成本、简化基础设施管理，并获得更灵活的部署环境。无论是独立项目还是生产级应用，迁移到 DigitalOcean 都能让你享受面向开发者的简洁定价和现代化体验。每个应用栈各有差异，可能需要根据具体情况添加额外步骤。
博客
DigitalOcean推出Valkey托管缓存服务
04-27 501
今天我们激动地宣布推出DigitalOcean的Valkey托管缓存服务，这是我们全新的托管数据库服务，能够无缝替换托管缓存（此前称为托管Redis®）。Valkey托管缓存服务在你一直依赖的功能基础上，还提供了增强工具来支持你的开发需求。wp:heading。
博客
DeepSeek R1模型微调怎么做？从入门到实战
04-21 3129
微调是将预训练模型转变为能够解决具体问题的精准工具的关键过程。在这个过程中，我们并不是在“重新发明轮子”，而是在对其进行精准调校，让它更好地为我们的目标服务。虽然预训练模型功能强大，但它们的输出往往缺乏结构性和专业度，而微调正是解决这一问题的关键。我们希望本教程不仅帮助你理解了何时以及如何使用推理模型进行微调，也为你今后更深入地打磨这项技术提供了一些灵感。
博客
教程：无需代码，跨境电商如何在指纹浏览器快速配置 IP
04-17 2278
尽管面临关税风暴等挑战，中国一季度出口规模依然突破了 6 万亿元，实现了 6.9% 的增长。这一数据不仅展示了中国出口的强大韧性，也为跨境电商行业注入了一剂强心针。在全球化电商蓬勃发展的今天，跨境电商已成为众多商家拓展业务版图的重要途径。然而，对于许多不熟悉技术细节的商家而言，如何拥有成本低、稳定的海外 IP ，是很多跨境电商人在使用指纹浏览器的时候的一大难题。
评论 4
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值