Apache ServiceComb Kie | 一个语义型配置中心

Apache ServiceComb — Overview 目录 文章目录目录Apache ServiceCombApache ServiceComb Service Center Apache ServiceComb Apache ServiceComb 是一个具有开箱即用、高性能、兼容流行生态、支持多语言的一站式开源微服务解决方案。 官方网站:http://servicecomb.apache.org/ 官方博客:https://blog.youkuaiyun.com/ServiceComb Apache ServiceComb 的前身为华为云的微服务引擎 CSE(Cl 阅读详情

项目地址:https://github.com/apache/servicecomb-kie

 

这次我想分享如何管理分布式应用系统中的配置项,我们的实践路程与遇到的问题。

为什么要用配置中心

我相信大家在开发的过程中,经常会遇到的问题是:

  • 我有个新的特性,但是我需要对其进行控制,在必要时能将功能关闭或打开

  • 链接数据库的线程池需要调整

  • 访问某个目标的超时时间需要调整

  • 调节任务执行器的线程池大小

  • 随着业务发展,几百,几千的虚机或是容器实例配置需要管理

难道每次配置我都要去代码库中改变然后重新发布版本么?

我在曾经的项目中就是这么做的,得益于当时完善的CICD,我们只需要几分钟就可以完成这样的一次变更,但是依然要面临进程的重启,所以之后的实践中我们直接将配置管理放入到了编程框架中,并配以中心式的配置管理服务。

使用编程框架

我在这篇分享中有大量分享欢迎参考:Go语言分布式系统配置管理实践--go archaius

有了这次改变后我们就做到了在运行时让配置生效,不用通过流水线重新发布新版本。

在流水线中能做的只是在发布一个服务时,对接配置中心的API,对相关配置进行变更,比如进行一次新版本的发布,更改金丝雀发布策略。

配置逐渐变得难以管理

配置中心的数据模型逐渐无法满足需求。

01 Dimension概念

配置项以Dimension划分 Dimension由{service}@{app}#{version}表示,也就是服务相关信息拼接而成的字符串。

Dimension就是一个唯一的ID,关联各个配置项,也就是一段json结构体。

{
"timout":"1s",
"pool_size":"10",
}

也就是说我们对着微服务、版本、所属应用3个维度来下发信息。

如果要更改微服务级别的服务,即不区分版本,我们就对{service}@{app}这个dimension进行变更。

能力就仅限于这两个层级了。

随着业务的发展我们发现这样的结构体不能满足一些场景:

  • 配置中心围绕微服务的治理概念进行设计(超时,熔断,负载均衡策略等配置),但是用户的业务系统配置也使用这套配置中心和开发框架管理(比如我说的某个功能开关),不该让用户去理解微服务,版本,app的概念,而是直白的,让用户更改配置,比如按照环境去下发environment=test或者production

  • 服务的元数据不只是version,app,可能还有instance,也就是对着服务进程,只改变某个进程的配置进行小范围测试,除了instance还有更多元数据需要考虑,我们无法做到精准控制,比如按照project

02 key变得复杂

由于json结构体的局限性配置项的key越来越不易理解,key越来越长,比如:

{
"ServiceB.timeout":"1s",
"ServiceB.user.getUser.timeout":"10",
}

第一行表示访问服务B时超时是多少

第二行表示到服务B的getUser API超时是多少

这还远远不够,服务还有版本,环境,所属app等多个字段,如下配置,由于每个字段没有语义,我们已经无法知道第二个字段到底是什么意思了。

{
"ServiceB.v1.timeout":"1s",
"ServiceB.user.getUser.timeout":"10",
}

难道我们都要继续拼接下去?我们来看看问题:

  • key语义学习成本高,语义容易混乱

  • 所有的key集中在一个列表中管理,管理成本高。

  • 当拼接规则复杂起来,人类不可读。

  • Key设计几乎无法扩展或者变更(需要极高成本才能变更)

当然我们可以给json的value传入个json、yaml、java properties值,key用更大的维度来表示,比如文件名,但是一个围绕微服务概念设计的配置中心做不到通用,Dimension需要更加灵活,让人易于理解。

Apache ServiceComb Kie

在发展的过程中,我们重新设计了配置中心,不只围绕微服务场景,或者像kubernetes的config map围绕容器,而是希望能够成为一个通用的配置中心,让更多的生态接入。

重新设计的结构体。

kie取自key的谐音

正如名字所突出的,key成为了同等公民,一个文件名"xxx.yaml",一个传统的key“timeout” 都可以是一个key,我们希望key简单,易理解。然后围绕key定义labels以表示复杂的语义。

直接演示下运行效果:

key就在API path中(timeout),label与value在request body中定义。

这句话的意思是,在对订单服务进行访问时,超时是1s

返回的respsonse body中,可以看到版本号“revision”是2,这说明,label是第二次被使用(之间labels的历史记录已经被储存了)。

value具备type,不传就是plain text,在前台显示是可以根据类型做展示,更易读。

最重要的是labels,你可以为key定义多个labels,只有label完全一致,才认为这是个唯一的“Dimension”,我用label概念来代替了过去定死的Dimension。有了labels与key,你已经可以自由的去定义自己的配置,表达自己的语义。

我接着新建了一个配置,表示访问该服务,要使用会话粘纸,但是可以看到,revison是3,因为历史管理是根据label记录的,以让用户可以根据labels来将所有key快速回滚到某个历史状态中,单一的回滚key来试图恢复系统也许会引起更大的混乱。

我们再来个稍微复杂的:

这次我们新建了一个复杂语义的label,表示:如果前台访问订单服务的1.0.1,那么负载均衡策略是round robin。

今天的介绍就简单到这里,后面会持续对kie的新特性进行分享,我希望通过这篇文章让大家对复杂分布式系统中的配置管理实践有些了解。

servicecomb-kie:Apache ServiceComb MetaConfig Apache-ServiceComb-Kie 分布式系统中的配置管理服务。 构想 钥匙 键可以指示类似“超时”的配置,然后值可以是“ 3s”或指示文件名“ app.properties”,然后值可以是app.properties的内容 标签 每个键可以具有标签。 标签表示唯一键。 带有标签“ env = production”的键“ log_level”可以为生产环境中的所有应用程序日志级别保存值“ INFO”。 带有标签“ env =生产,组件=付款”的键“ log_level”可以为生产环境中的付款服务保存值“ DEBUG”。 这意味着所有付款服务打印调试日志,但其他服务打印信息日志。 因此,您可以通过为键设置不同的标签来控制应用程序的运行时行为。 为什么要使用基 kie是高度灵活的配置服务器。 如今,运营团队正面临着不同的“ x集中式”系统。 例如,一个经典的以应用程序为中心的 立即下载

相关推荐

实战指南:在UE5中高效集成Entt(ECS)框架

本文提供了一份在虚幻引擎5中高效集成Entt ECS框架的实战指南。针对UE5项目在处理大规模动态实体时的性能瓶颈,详细讲解了如何通过数据驱动的ECS架构进行优化。内容包括前期环境准备、核心构建步骤、创建首个ECS子系统以及与UE原生系统的数据同步技巧,旨在帮助开发者快速掌握集成方法,提升游戏逻辑的执行效率。

weixin_29002209的博客 158

新特性解读 | Apache ServiceComb Kie 0.1.0发布

ServiceComb kie 0.1.0发布, kie是分布式系统中用于配置管理的组件,目前版本提供key value管理,以及key的历史版本管理。提供了go语言客户端供开发者接入 kie的加入意味着ServiceComb管理面得到了补全,过去ServiceComb只提供了注册发现服务,配置管理服务的加入,允许开发者可以从统一的中心管理微服务的配置 kie取自key的谐音...

github_33929692的博客 694

Oracle 19c RAC安装踩坑实录:OpenSSH 8.x版本与OUI的“兼容性战争”及一劳永逸的解决思路

本文深入解析Oracle 19c RAC在Linux8环境中部署时遇到的OpenSSH 8.x版本兼容性问题,特别是[INS-06006]错误的根源与解决方案。从协议层分析冲突本质,提供SCP包装器技术、官方补丁应用指南及现代化部署体系构建三种解决方案,帮助企业高效完成RAC安装并规避类似问题。

weixin_42648844的博客 459

Apache ServiceComb Kie----如何管理分布式系统中的配置

这次我想分享如何管理分布式应用系统中的配置项,我们的实践与遇到的问题 为什么要用配置中心 我相信大家在开发的过程中,经常会遇到的问题是 我有个新的特性,但是我需要对其进行控制,在必要时能将功能关闭或打开 链接数据库的线程池需要调整 访问某个目标的超时时间需要调整 调节任务执行器的线程池大小 随着业务发展,几百,几千的虚机或是容器实例配置需要管理 难道每次配置我都要去代码库中改变...

github_33929692的博客 841

RC电路(一):微分|积分

的取值不同,会导致输出波形和输入波形之间的关系也不同,由此也会产生不同的应用。输出为0,随着电容充满电,运放-输入端得到的分压为正最大值,可等效成一个电压源,且电压不可突变,此时电流反向为最大值,开始充电时的容抗为0,电压不可突变则电压差为0,运放。开始充电时的容抗为0,电压不可突变则电压差为0,运放。输入端得到的分压也不可突变,随着电容放完电,于是。,因电容上电压不能突变(来不及充电,相当于短路,由上分析可得积分运算电路中,输出为运放的负最大峰值,随着电容充满电,输出为运放的正最大峰值,随着电容放完电,

既有随处可栖的江湖,也有追风逐梦的骁勇! 1万+

Delta-Sigma调制(DSM)技术

前言 数字信号处理和通信系统的性能很大程度上受到了模拟信号到数字信号转换接口——ADC的精度和分辨率的限制。而传统的线性脉冲编码调制(PCM)ADC受到了制造工艺的限制,无法达到很高的分辨率。但基于Delta-Sigma调制技术的ADC可以在现有工艺下实现高分辨率(大于16位),同时由于结构简单,所以易于实现。低成本高性能使得Delta-Sigma调制技术得到了广泛的应用。 Delta-Sigma型ADC的结构原理图如下图所示: 它最大的优势在于仅用1位ADC进行数据转换,同时其模拟电路部分结构简单不需要

阿星的博客 2万+

Apache ServiceComb微服务技术的发展

Apache ServiceComb,正式诞生于2018年10月24日,从此一个以解决微服务问题为愿景的基金会项目进入大众的视野。近几年,微服务更多地暴露在国内技术圈的聚光灯下,成为技术社交、媒体和大会演讲的热点,华为云将ServiceComb开源并捐赠给Apache软件基金会。

Adley志明.杨的博客 670

Dify 部署与使用

本文介绍了Dify社区版的快速部署指南,涵盖系统架构、环境配置和初始化流程。Dify采用微服务架构,通过Docker Compose一键部署8个核心容器,包括前端、后端、数据库等组件。部署过程包括克隆代码、配置环境变量和启动服务,首次启动需3-10分钟下载镜像。文章详细讲解了.env文件的配置要点,包括服务地址、数据库连接和向量存储设置,并提供了生产环境安全加固建议。最后通过访问/install页面完成管理员账号初始化,即可开始使用Dify构建AI应用。

海兰 600

【亲测免费】 探秘Apache ServiceComb-Kie:分布式配置管理的神器

探秘Apache ServiceComb-Kie:分布式配置管理的神器 在当今快速迭代的微服务架构中,配置管理成为了运维团队面临的一大挑战。如何高效、灵活地管理分布在多个环境和服务中的配置?Apache ServiceComb-Kie应运而生,作为一款强大的配置中心解决方案,它以简洁的设计和高度的灵活性赢得了开发者的青睐。 项目介绍 Apache ServiceComb-Kie是一个专注于分布式系...

gitblog_01068的博客 1094

什么是 SAPGUI 里的 Logon Group/Server

这意味着,不同的用户连接可以被分配到不同的应用服务器,以实现均衡的资源利用和降低某一服务器的负载压力。在这种配置下,欧洲的用户登录时选择“EUROPE_GROUP”,系统将自动选择一个位于欧洲的数据中心的服务器进行连接,这样不仅减少了网络延迟,还实现了服务器间的负载均衡。用户在 SAPGUI 中登录时,只需选择相应的 Logon Group(例如“FIN_GROUP”),系统就会自动将他们的连接请求分配到当前负载最小的应用服务器上,这种动态分配大大提升了系统的响应速度和稳定性。

2007 年 ~ 2025 年,深耕 SAP 技术 18 年 1073

医学图像的对抗攻击:模型安全性与鲁棒性分析

医学图像的对抗攻击:模型安全性与鲁棒性分析 ,人工智能,计算机视觉,大模型,AI,本文围绕医学图像的对抗攻击展开,分析了其对AI模型的威胁。介绍了对抗样本定义、攻击原理,以及FGSM、BIM、PGD等常见攻击方法,还给出了相关代码示例。阐述了攻击对模型诊断准确性和可信度的影响,提出对抗训练、输入预处理、模型集成等提升模型安全性与鲁棒性的方法,探讨了评估指标、数据集和流程,分析了实际应用中的挑战与应对策略,最后展望了未来发展趋势。

不踩坑,不知道坑有多深;不总结,踩过的坑白踩。 18万+

Apache ServiceComb Kie 使用手册

Apache ServiceComb Kie 使用手册 Apache ServiceComb Kie 是一个由Apache软件基金会管理的MetaConfig项目,用于服务治理中的配置管理。以下是关于其目录结构、启动文件以及配置文件的详细介绍。 1. 项目目录结构及介绍 Apache ServiceComb Kie 的仓库在 GitHub 上,通过链接 https://github.com/apa...

gitblog_00423的博客 1182

深度学习实战:基于YOLOv5/v8/v10的快递暴力分拣检测系统(完整版)

在电商物流高速发展的今天,快递包裹日均处理量已突破亿件级别。然而,快递分拣过程中的暴力抛扔行为不仅造成包裹损坏,更带来巨大的经济损失。据统计,每年因暴力分拣导致的快递破损投诉占总投诉量的30%以上。传统的人工监控方式存在疲劳、疏漏等问题,因此开发一套智能化的快递暴力分拣检测系统具有重要的现实意义。

YOLO 278

Apache ServiceComb Kie 使用教程

Apache ServiceComb Kie 使用教程 项目介绍 Apache ServiceComb Kie 是一个开源的配置管理服务,旨在为微服务架构提供动态配置管理功能。它支持通过简单的API进行配置的创建、更新和删除,并且可以实时地将配置变更推送到应用中,从而实现无需重启应用即可更新配置的功能。 项目快速启动 环境准备 确保你已经安装了Docker和Docker Compose。 启动服务...

gitblog_00285的博客 1077

LinePhone3.2.7(android端最新版本) sip客户端

SIP客户端For android:LinePhone3.2.7(最新版本),官网地址:http://www.linphone.org/

VB摄像头监控

该VB模块可对摄像头捕获的画面进行录像等,可在创建的窗口进行控制

探索分布式配置管理新境界:Apache-ServiceComb-Kie 深度剖析与应用实践

探索分布式配置管理新境界:Apache-ServiceComb-Kie 深度剖析与应用实践 在分布式系统日益复杂化的今天,如何高效、灵活地进行配置管理成为了技术团队面临的一大挑战。幸运的是,有这样一款由Apache基金会孵化的重量级开源工具——Apache-ServiceComb-Kie,它以简洁而强大的设计,为我们打开了一个全新的配置管理世界。 项目介绍 Apache-ServiceComb-K...

gitblog_00091的博客 1081

Data-Structures-and-Algorithm-Analysis-in-Java.pdf

作者: Weiss, Mark A. 出版社: Addison Wesley Data Structures and Algorithm Analysis in Java is an “advanced algorithms” book that fits between traditional CS2 and Algorithms Analysis courses. In the old ACM Curriculum Guidelines, this course was known as CS7. This text is for readers who want to learn good programming and algorithm analysis skills simultaneously so that they can develop such programs with the maximum amo...

Apache ServiceComb Kie 项目教程

Apache ServiceComb Kie 项目教程 1. 项目的目录结构及介绍 Apache ServiceComb Kie 项目的目录结构如下: servicecomb-kie/ ├── build/ ├── cmd/ ├── conf/ ├── docs/ ├── examples/ ├── pkg/ ├── scripts/ ├── servicecomb-kie.go ├── go.m...

gitblog_00966的博客 345

计算机控制技术及应用

《计算机控制技术及应用》通过总结作者的科研成果和吸收国内外的先进理论、方法和技术,以计算机控制系统的网络化、开放化、智能化和集成化发展趋势为主线索,主要介绍计算机控制系统的基本概念和计算机控制系统的典型形式,计算机控制系统的数学描述与基本分析方法,以及数字PID控制器、最少拍控制系统、达林算法、状态变量设计法等设计方法及其各种改进算法。重点突出计算机控制系统输入输出通道接口的设计方法和典型控制系统的设计案例与实现方法等。

Apache ServiceComb Mesher 项目推荐

Apache ServiceComb Mesher 项目推荐 项目基础介绍和主要编程语言 Apache ServiceComb Mesher 是一个高性能的服务网格实现,主要使用 Go 语言编写。该项目旨在为微服务架构提供强大的服务治理能力,支持在多种基础设施上运行,包括 Docker、Kubernetes、虚拟机和裸金属服务器。 项目核心功能 服务网格支持:Mesher 可以作为服务网格的一部...

gitblog_00727的博客 724

Apache ServiceComb Java Chassis 2.0.0 新特性重磅出击:多配置中心支持

点击上"蓝字"关注我们作者 | LiuBao很多热心的开发者给 2.0.0 贡献了很多新的特性, @guoyl123 贡献了 servicecomb-kie 的支持, @...

微服务技术与实践专栏 1209

Apache ServiceComb Kie 常见问题解决方案

Apache ServiceComb Kie 常见问题解决方案 项目基础介绍 Apache ServiceComb Kie 是一个用于分布式系统配置管理的服务。它提供了一个灵活的配置服务器,允许用户通过键值对(Key-Value)和标签(Labels)来管理配置项。该项目的主要编程语言是Go。 新手使用注意事项及解决方案 1. 环境配置问题 问题描述:新手在尝试运行项目时,可能会遇到环境配置问题,...

gitblog_00877的博客 458

一起读Apache ServiceComb

喜欢我,就点个Star吧~https://github.com/apache?q=servicecomb入门必读:必读1:首个Apache微服务顶级项目毕业必读2:致微服...

微服务技术与实践专栏 2437

Apache ServiceComb Java Chassis 使用教程

Apache ServiceComb Java Chassis 是一个用于快速开发微服务的Java软件开发工具包(SDK)。它提供了服务注册、服务发现、动态路由和服务管理等功能。ServiceComb Java Chassis 支持多种开发模式,包括REST(JAX-RS、Spring MVC)和RPC,并且支持多种通信协议,如HTTP over Vert.x、Http Over Servlet和

gitblog_00033的博客 1057

Apache ServiceComb 社区5月动态精选

点击蓝字关注我们或许我可用夏日把你来比方,但你比夏日更可爱也更温良。夏风狂作常摧落五月的娇蕊,夏季的期限也未免还不太长。......只要人眼能看,人口能呼吸,我诗必长存,...

微服务技术与实践专栏 318

servicecomb-service-center简介

apache servicecomb-service-center简介

TSIYAO11的专栏 2161

ServiceComb 示例项目指南

ServiceComb 示例项目指南 1. 项目介绍 ServiceComb 是由 Apache 软件基金会支持的全栈式开源微服务平台。它提供了高性能、易于使用的微服务框架,兼容流行的生态系统并支持多种语言。ServiceComb 示例项目(servicecomb-samples)旨在展示如何利用 ServiceComb 实现常见的微服务场景。 主要特性: 多语言支持: 支持 Java、Go 等...

gitblog_01029的博客 1067

推荐开源项目:Apache ServiceComb Kie - 分布式系统配置管理服务

推荐开源项目:Apache ServiceComb Kie - 分布式系统配置管理服务 项目介绍 Apache ServiceComb Kie 是一款专为分布式系统设计的高灵活性配置管理服务。它提供了一个REST API接口,用于管理和查询键值对(KV)数据,并支持基于标签的精细配置控制。Kie的设计理念是适应各种不同的中央化系统场景,无论您的团队如何组织和部署应用,都能轻松地实现配置管理。 项目...

gitblog_00015的博客 684
上一篇: 【大咖连载】微服务架构的本质
下一篇: 基于ServiceComb开发微服务如何解决跨域CORS问题
looook
博客等级 码龄20年 145粉丝 195原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值