大咖连载|可扩展性设计(三)

开源SDN平台的可扩展性与部署要点 丨FNDC演讲实录 内附完整视频+演讲资料 阅读详情

送你小心心记得关注我哦!!

作者|华为云微服务架构师 王启军

本文节选自《持续演进的 Cloud Native 云原生架构下微服务最佳实践》

如何扩展数据中心

1.1.1 两地三中心和同城多活

通常,为了容灾,大型企业系统会采用灾备的部署方式,也就是说,一个主机房,一个备份机房,主机房承载所有的流量,而备份机房平时处于休眠状态,没有流量,只有当发生灾难,主机房不可用的时候才会启用备份机房。而通常主备之间的延迟比较大,只能采用异步复制数据的方式。但是这仅仅作为灾备,如果一个机房的容量达到瓶颈,是无法扩展的。

为了解决这个问题,通常会采用两地三中心的方案,这也是很多银行系统在使用的方案。如图1所示,其中两个机房需要离的比较近,延迟非常小,某些场景下可以看成一个机房,所以,需要专线连接,所有的流量都由这两个机房承载,另外一个则作为灾备,平时处于休眠状态。

图 1 两地三中心

对于两地三中心,问题如下:

  • 由于需要低延迟,专线比较贵,“两地”通常离的比较近,真正的灾难来临,例如地震,还是跟主备一样。

  • 备份节点处于休眠状态,比较浪费资源。

  • 备份节点处于休眠状态,真正切换的时候,需要的时间较长。

我们需要明确的是,在两地三中心这种数据中心架构中,首先需要梳理出核心业务流程,对服务进行分级,规划哪些业务需要部署到多个数据中心,并不是所有的应用都需要做到那么高的可用性。

其次,往备份节点同步数据一定是异步的复制方式,否则性能会受到非常大的影响,异步意味着可能会丢失部分数据,这是不可避免的,如果真的发生地震,只要磁盘不坏,还是可以恢复的,尽管恢复的时间比较长。

1.1.2 同城多活

微信采用的是一地三园区的部署方式,三个园区是对等并且物理隔离的,也就是说,无论是服务层,还是存储层,都部署在三个园区,流量被负载均衡到三个园区,不存在资源浪费。当其中一个园区发生故障时,流量会被均分到另外两个园区,另外两个园区流量上升百分之五十。这是由微信的底层存储决定的,微信底层存储采用的是KVSvr,可以实现强一致性、高可用、高性能,实际上,是利用W+R>N原理,只要写数据时写两份成功才返回,就能保证,如果一个节点挂掉,读取两个节点一定能读到一份最新的数据。当然,一地决定了时延较低,但是也无法做到跨城区的容灾。

我们来总结一下上面的方案。

  • 如果跨城区,能跨城市容灾,但是成本高,利用率低,一致性低。

  • 如果同城,成本低,利用率高,可以保证核心业务强一致,但不能跨城市容灾,且扩展性受限。

那么有没有其他的方案呢?当然是有,不过,系统架构将变的越来越复杂,成本越来越高。

1.1.3 异地多活

异地多活是指在两个以上的城市建立机房,流量被平均分配,当一个城市出现故障的时候,可以将发生故障的城市的流量快速切换到其他城市。异地多活就像以城市为单位的分片,如,IP为北京的访问北京机房,IP为上海的访问上海机房。

如果做到异地多活,首先要分析业务,实际上,有的业务要实现多活是比较容易的,而有的业务是很难实现多活的。

例如手机通讯录,用户之间是没有关系的,也就是说A的通讯录里面存的数据不需要和其他人有任何关系。这种数据结构非常简单,可以以用户所在城市为切分键,这样就不存在一行数据在多个数据中心同时修改的情况。假设将中国分为三个数据中心,分别为北京、上海、广州,当用户属于北京数据中心时,所有请求都访问北京。新增数据时,只要北京写入成功就返回,然后同步组件订阅数据库binlog信息,同步到其他机房汇总、备份。如图2所示。

图 2 异地多活

如果是微博、电商这种数据,选择切分键就比较麻烦。在电商中,有买家和卖家两个维度读写数据,当买家下订单后,卖家维度要及时扣减库存,生成订单。而买家和卖家很可能不在一个城市。由于一般电商都是微服务架构,一次下单操作,在后台可能是几百次请求调用,如果这些请求要在多个数据中心来回传递10次,假设每次跨数据中心要延迟50毫秒,那一次下单操作在采用异地多活架构之后就要比以前响应时间降低500毫秒,这是不能接受的。所以,我们最好能保证一次请求可以在一个机房内完成。

由于异地多活的成本比较高,不只是物理成本,还有设计、开发、维护的成本,因此,应该尽量让核心业务实现异地多活,而不是所有业务一视同仁。这个思路和数据库的扩展是一致的,如果能将一个独立的业务拆分到另外一个机房,应该优先选择这种方案,如果依赖太多,解决不了,再选择异地多活。另外一个原因是有些业务很难实现拆分,特别是一些对一致性要求特别高的服务,比如库存,异步将是致命的。

在考虑异地多活的时候,还要考虑一致性问题,前面我提到了一行数据的一致性问题,如果是整张表的一致性呢?如注册手机号,需要唯一键约束,如果分布到多张表中,无法实现一致性约束,虽然前端在写入前做了很充分的校验,但是如果一个用户进入多个注册页面,填写了校验信息,瞬间提交所有注册请求,由于异步的问题,可能导致全部成功。这时候有两种解决方案,一种是从业务的角度,这种毕竟是少数,如果前端已经做了防重复提交,那就可能存在恶意行为,应该由另外的定时任务去补偿处理。另外一种从技术角度,如果认为业务不允许出现任何不一致,此业务可以不做异地多活,可以做到多个数据中心读取,一个数据中心写入。

本文为作者原创文章,未经作者允许不得转载。

《持续演进的 Cloud Native 云原生架构下微服务最佳实践》正在热卖中!快来抢购哟~

当当:

http://product.dangdang.com/25577028.html

京东:

https://item.jd.com/12452009.html

微服务引擎(Cloud Service Engine):提供高性能微服务框架和一站式服务注册、服务治理、动态配置和分布式事务管理控制台,帮助用户实现微服务应用的快速开发和高可用运维;支持ServiceComb、Spring Cloud和Service Mesh运行环境

https://console.huaweicloud.com/servicestage/?package=basic&new=true&region=cn-east-2#/appdev/engine/list

往期回顾

大咖连载|可扩展性设计(一)

大咖连载|可扩展性设计(二)

点击下方“阅读原文”,了解更多☺

《AI高效运维体系建设创新》技术连载(四) 随着企业数字化转型的不断深入,IT基础设施日益复杂,云环境、混合云、微服务、容器化等新技术的广泛应用使得传统运维方式面临严峻挑战。在这一背景下,人工智能技术与运维领域的深度融合,催生了AI运维(AIOps)的新范式。AIOps不仅仅是对传统运维的升级,更是一种运维理念与模式的根本性变革。 阅读详情

相关推荐

杰奇建站CMS1.7免费版:小说连载网站的构建利器

本文还有配套的精品资源,点击获取 简介:杰奇建站CMS1.7免费版是专为小说连载网站设计的内容管理系统,提供了一系列功能,包括小说分类管理、章节发布、用户互动等。系统基于PHP开发,具备良好的可扩展性和稳定性。除了核心的小说连载模块和论坛模块,它还包括数据库管理、模板引擎、SEO优化、权限管理等特性。该系统免费提供,简化了小说网站的搭建过程,降低了开发成本。 1....

weixin_42575109的博客 1675

软件系统的可扩展性设计

系统的可扩展性一、可扩展性的设计1.可扩展性设计的优势2.可扩展性设计的目的3.可扩展性设计的两种方法二、可扩展性设计的形式1.分层架构2.消息队列3.远程调用4.开放平台三、企业级系统的平台化设计1.分层设计2.模块化3.数据建模4.流程建模5.状态建模6.权限建模7.报表系统8.界面建模四、总结 一、可扩展性的设计 通常网站的可扩展性架构设计,能够在对现有系统影响最小的情况下,同时能保持可持续...

tsxiong123的博客 4万+

设计可扩展的接口原则

实现拥抱变化的方式很多,设计大师们为我们总结出23种设计模式,但是在项目实践中有效地使用设计模式是个难题,因此大部分业务设计很难采用它们来实现,我们在项目中尽量采用这六大设计原则,经常使用这些原则来检验我们的设计是否满足要求,让我们的设计真正达到高内聚、低耦合

可扩展性设计架构模式——分层架构

分层架构是一种软件设计模式,它将应用程序分割为互相独立的层次,每层都有其特定的职责。这些层次通常包括表示层、业务逻辑层、持久层和数据访问层。通过这种方式,每个层次都可以独立开发、测试和维护。在目录下创建一个新的package叫model,并创建一个Java类Product。@Entity // 表示这是一个与数据库表映射的实体类@Id // 表示这个字段是表的主键@GeneratedValue(strategy = GenerationType.AUTO) // 自动生成主键值。

goTsHgo的博客 2313

微服务:分解应用以实现可部署性和可扩展性

本文描述了日渐流行的微服务架构模式。微服务背后大的理念是将大型、复杂且历时长久的应用在架构上设计为内聚的服务,这些服务能够随着时间的流逝而演化。微服务这个术语强烈建议服务应该是很小的。社区中有些人甚至建议构建10-100代码行(LOC)的服务。但是,尽管很小的服务是我们想要的,但这不应该是主要的目标。你应该致力于将系统分解为服务,以解决下面所讨论的开发和部署问题。一些服务可能确实会很微小,但有些可能会非常大。微服务架构的本质并不新鲜。分布式系统的理念历史非常悠久。微服务架构也很类似于SOA。它甚至曾经被称为轻量级或细粒度的SOA。确实是这样,思考微服务架构的一种方式就是将其视为没有商用和沉重W

LibTV保姆级教程:从提示词到AI视频成片全流程

AI视频生成技术正以前所未有的速度重塑内容创作行业,过去需要编剧、摄影、剪辑等多角色协作的复杂流程,如今借助AI绘画与图生视频等核心能力,一个人也能完成高质量短视频制作。理解提示词工程是掌控AI视频创作的关键,通过精准描述主体、环境、光线与运镜,可以显著提升生成画面的稳定性与专业度。而图生视频技术则让静态分镜自然流动,有效解决角色一致性与场景漂移等常见问题。这类工具已广泛应用于产品宣传、剧情短片、社交媒体内容生产等场景,大幅降低了视频创作门槛。本文以LibTV一站式AI视频创作平台为例,从核心概念到完整实操

weixin_29046035的博客 1005

网站可扩展架构设计

从公众号转载,关注微信公众号掌握更多技术动态 --------------------------------------------------------------- 一、可扩展性架构简介 1.可扩展性是什么 可扩展性指系统为了应对将来需求变化而提供的一种扩展能力,当有新的需求出现时,系统不需要或者仅需要少量修改就可以支持,无须整个系统重构或者重建。由于软件系统固有的多变性,新的需求总会不断提出来,因此可扩展性显得尤其重要。面向对象思想的提出和设计模式的应用,就是为了解决可扩展性带来的

qq_39403646的博客 1138

Seedance2.5本地部署指南:从环境配置到生产优化的完整实践

在 AI 内容生成领域,本地部署方案正逐渐成为开发者和技术团队关注的焦点。Seedance2.5 作为一款支持图像和视频生成的 AI 工具,其完全离线运行的能力解决了云端服务在数据隐私、使用成本和访问稳定性方面的痛点。对于需要处理敏感内容、频繁生成素材或希望完全掌控生成流程的技术人员来说,掌握本地部署方法具有实际价值。 本文将以 Seedance2.5 的本地部署为例,详细介绍从环境准备、依赖配置到运行验证的完整流程,同时深入分析关键参数配置、常见问题排查方法以及生产环境下的优化建议。通过实际部署过程,理解

weixin_33139275的博客 737

可扩展性设计架构模式——关注未来需求的思想

在架构设计中,可扩展性是一个至关重要的考虑因素。设计一个可扩展的系统意味着这个系统能够适应未来增长的需求,包括处理更大的数据量、支持更多的用户,或者增加新的功能而不需要重构整个系统。在底层原理层面上,实现可扩展性通常涉及到几个关键方面:模块化设计、数据管理、资源管理和系统集成。

goTsHgo的博客 3388

RiscV运行zephyr和Linux的方法

riscv基金会搞了一个网站,用于介绍如何使用riscv指令集进行开发。 对于运行zephyr和linux以及Qemu有非常大的帮助。 可以作为riscv开发的相关参考。 RISC-V - Getting Started Guide — RISC-V - Getting Started Guidehttps://risc-v-getting-started-guide.readthedocs.io/en/latest/index.html RISC-V - Getting Started Gu.

闲人的专栏 737

本地AI语音生成与配音工作台Pandrator:从TTS到RVC的完整实践指南

语音合成(TTS)技术通过深度学习模型将文本转换为自然语音,其核心原理涉及声学建模与波形生成。这项技术不仅提升了人机交互体验,更在内容创作领域展现出巨大价值,广泛应用于有声书制作、视频配音、虚拟助手等场景。本文聚焦于一个集成了XTTS-v2、RVC等先进模型的本地化AI语音工作台——Pandrator,它通过模块化架构将语音合成、声音克隆、音频转录与翻译等流程无缝整合,为用户提供了一个图形化、可定制的完整解决方案。文章深入解析了其基于TTS与RVC(Retrieval-based Voice Convers

weixin_42676876的博客 341

可扩展性设计(二)

1.1 如何扩展数据库 前面我们讲到了数据库扩展的一个大致流程,下面我们详细讲解每种扩展方案。 1.1.1 X轴扩展—主从复制集群 假设我们的service访问数据库的吞吐量在4500TPS,其中写为500TPS,这种典型的读多写少的场景,我们通常会采用读写分离,如图5-1所示,将所有的读请求分发到Slave上,Master只负责写,Master和Slave之间通过数据库自带同步机制复制数据...

LMAKE_nbsp的博客 2608

智能座舱测试工程师必看:从零搭建自动化测试框架的5个实战技巧

本文为智能座舱测试工程师提供从零搭建自动化测试框架的5个实战技巧,涵盖环境搭建、ADB高级应用、Python脚本工程化、Monkey测试优化及性能调优。通过ADB深度操作和Python脚本封装,帮助测试人员构建高可复用的智能座舱测试解决方案,显著提升测试效率与问题发现率。

python9snake的博客 639

大咖连载|可扩展性设计(一)

没关注?伸出手指点这里---作者|华为云微服务架构师 王启军本文节选自《持续演进的 Cloud Native 云原生架构下微服务最佳实践》可扩展性的重要程度在很多系统中往...

微服务技术与实践专栏 764

基于R语言的DICE模型实践技术应用;预测不同减排路径下的经济增长、碳排放量、气候变化程度以及社会福利变化

DICE模型是一个动态综合气候经济模型,由诺贝尔经济学奖得主William Nordhaus开发,用于评估气候变化对经济的影响以及不同减排政策的经济成本和效益。以下是一个关于DICE模型在气候变化影响评估中的实际应用案例,结合R语言代码进行讲解。

KY_chenzhao的博客 869

基于Keil软件实现OLED显示(江协科技HAL库)

没有HAL库的OLED驱动文件,可以看过来

2401_82728381的博客 1453

【大咖连载】服务设计与实现

更多精彩内容请关注我们服务设计会影响到业务需求是否被正确、高效地实现,良好的服务设计能够帮助领域专家与开发人员之间,以及团队内部进行高效、准确的沟通。良好的实现则能缩短服...

微服务技术与实践专栏 634

垂类大模型 研发方向与具体方案调研

领域知识库加上通用大模型,针对通用大模型见过的知识比较少的问题,利用向量数据库等方式根据问题在领域知识库中找到相关内容,再利用通用大模型强大的summarization和qa的能力生成回复,完成本次垂直大模型研发。目前很多企业希望将大模型的能力应用到企业内部当中,但很多通用大模型只是一个预训练模型,其所能回答的知识主要来源于互联网上公开的通用知识库,对于部分垂直领域和企业内部的私有知识库的问答,给出的回答。:垂类大模型的效果与底座性能息息相关,研发垂类大模型第一步就是确定开源大模型解决方案。

风吹落叶的博客 3332

大咖连载|可扩展性设计(二)

点击蓝色文字关注我们吧!作者|华为云微服务架构师 王启军本文节选自《持续演进的 Cloud Native 云原生架构下微服务最佳实践》1.1 如何扩展数据库前面我们讲到了...

微服务技术与实践专栏 376

win10 跳过U8环境检测的IE WebControls.rar

win10 安装u8的时候 提示IE WebControls 不通过,这个工具可以欺骗u8的检查。 跳过U8环境检测的IE WebControls。提示导入失败后,重新检测通过。

迈瑞BS系列全自动生化分析仪LIS协议接口手册(内含HL7和ASTM)

迈瑞BS系列全自动生化分析仪LIS协议接口手册,内含HL7和ASTM)

《网络工程师必读——网络系统设计》试读连载

快过年了,为了便于大家在这么长的节日期间系统地学习,下面把在我的博客中以前发表的图书试读内容集中起来,这样大家就可以对同一部书的较多内容连贯起来阅读。 网络设计的综合考虑              局域网系统设计的主要内容 网络系统设计的一般步骤     可扩展性需求分析 小型星形网络结构设计示例 光纤接入网广域网连接拓扑结构设计 ...

weixin_33872566的博客 145

IEM模型,地表粗糙度模拟

利用微波反演土壤水分时候,利用IEM模型可以实现对随机地表的模拟

软件技术连载(三)

软件技术连载(三)POWERBUILDER的魅力(三)反界面与逻辑分离作者:轻风   个人主页:http://gentlebreeze.home4u.china.com界面与逻辑分离的方法也许是近年来最具创新意义的设计理念之一。各种体系结构大多要围绕这一主题。这种方法使得技术有可能按照技术特征本身进行分工,使得程序的扩展性和灵活性获得了空前的提高。著名的Enhydra体系中的XMLC几

xiaomao3000的专栏 836

VC中sqlite的使用

在VC中对sqlite的使用,实现数据库大批数据的快速插入,读取数据库中的数据在ListCtrl中显示

【连载】设计模式笔记——设计模式简介

设计模式 内容来自菜鸟教程——设计模式部分~ 设计模式简介 设计模式(Design pattern)代表了最佳的实践,通常被有经验的面向对象的软件开发人员所采用。设计模式是软件开发人员在软件开发过程中面临的一般问题的解决方案。这些解决方案是众多软件开发人员经过相当长的一段时间的试验和错误总结出来的。 设计模式是一套被反复使用的、多数人知晓的、经过分类编目的、代码设计经验的总结。 使用设计模式是为了重用代码、让代码更容易被他人理解、保证代码可靠性。 毫无疑问,设计模式于己于他人于系统都是多赢的,设计模式.

weixin_52777510的博客 132

AI动画制作全流程解析:从Stable Diffusion到ComfyUI实战

AI视频生成技术正成为内容创作领域的热点,其核心原理是基于扩散模型,通过文本或图像输入生成连贯的动态序列。这项技术的核心价值在于大幅降低了动画制作的门槛,使个人创作者能够以较低成本实现风格化的动态叙事。在实际应用中,它特别适用于游戏同人创作、短剧制作和动态漫画等场景。通过整合Stable Diffusion、AnimateDiff和ControlNet等技术栈,可以构建完整的生成式应用管线。例如,利用角色一致性LoRA保持人物形象稳定,结合OpenPose实现精确动作控制。本文将以一个具体的游戏同人动画项目

weixin_34021089的博客 424

java23种设计模式十一(连载)

十一、构建者模式 构建者模式主要是用于创建复杂的一些对象,这些对象的创建步骤基本固定,但是可能具体的对象的组成部分却又可以自由的变化,比如房子装修,我可以在卧室里放电视,也可以不放电视,我还可以摆个电脑,这些属性可以自由变化。 要构建这样一个对象,就需要一个创建一个Buil...

chongsi9495的博客 94
上一篇: 一年一次开源盛会,微服务活动看过来
下一篇: 微服务可靠性设计
looook
博客等级 码龄20年 145粉丝 195原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值