异构微服务数据无损通信:Apache ServiceComb syncer完整示例实践

微服务架构在区块链BaaS平台中的实践 前言 微服务架构是近几年互联网行业比较火的概念,凭借灵活可扩展、独立部署…等优势,逐步成为分布式架构中的主流。那么微服务架构和区块链又能擦出哪些神奇的火花?本期将从微服务架构概述、微服务架构在BaaS平台的应用优势等角度展开介绍。 原文链接:https://mp.weixin.qq.com/s/9RzKszZ02RvfHCVDqNEqzg 什么是微服务架构? 微服务架构(Microservice Architecture)是一种架构概念,可以简单理解成一种将复杂系统拆分设计成多个微服务的架构,系统中的每个微 阅读详情

Apache ServiceComb ServiceCenter 1.3.0版本已于2019年11月07日发布,在这次版本中带来了异构、多服务中心同步工具 Syncer,在这里将从我们的已有的实践经验出发,带来对Syncer的介绍。
项目地址:https://github.com/apache/servicecomb-service-center/tree/master/syncer
1.3.0版本下载:http://servicecomb.apache.org/release/service-center-downloads/

 

为什么使用服务中心同步工具


从传统架构到微服务,为了解决微服务之间动态变更带来的问题,各微服务框架百花齐放,从而衍生出Service-center、eureka、consul等一系列服务中心;在云环境大行其道的今天,公/私有云并存、混合云部署在企业实践中似乎已成为趋势。在这过程中不得不面临一些问题:

  • 异构服务中心间的实例如何发现?
  • 跨区域间的实例信息怎么同步?
  • 统一企业内部微服务架构过程中,如何平滑迁移?

 

中心化解决方案带来的思考


在最初的项目中,我们应用了ServiceCenter的中心化解决方案 ServiceCenter Aggregate,详细介绍请参考:https://github.com/apache/servicecomb-service-center/blob/master/docs/multidcs.md
在使用这样的中心化解决方案后,异构服务中心的实例被同步到 Aggregate 中,服务只需指定服务发现地址到 Aggregate,即可实现对异构、跨区域实例的发现,同时也支持了微服务架构之间的平滑迁移。
经过一段时间的使用,集中式、中心化方案的不足逐渐显现,于是便有了如下的思考:

  • 对业务服务不透明,需要修改服务发现地址
  • 设计理念倾向于对自身服务中心的迁入,对异构服务中心并存支持不够友好
  • 中心化的架构,单点故障会造成同步的暂停,影响依赖服务的正常运行
  • 同步、数据结构转换的工作集中在单个服务中,容易造成性能瓶颈
  • 增加新的服务中心支持时,需要重新编译、启动同步服务
  • 维护成本增加,运维人员配置规则时需要理解所有服务中心的信息

 

Apache ServiceComb Syncer


针对以上的问题与思考,我们带来了无中心化的解决方案 Apche ServiceComb Syncer。Syncer是一个多服务中心的同步工具,专为大型微服务架构设计,用于在网络互通的情况下,不同技术栈服务中心、跨区域的实例同步,未来将对跨网络、跨云等场景提供支持。

 

Syncer的架构设计

 


Syncer以服务中心的伴生系统的形式而存在,主要负责从当前服务中心发现实例,并向网络其他成员进行广播;接收其他成员的广播,并拉取实例信息向当前服务中心进行注册。Syncer 有如下特点:

  • 业务架构零侵入,Syncer 以透明的形式为服务中心同步实例信息,不参与原业务流程,服务无需感知其存在。
  • 不绑定服务中心,兼容生态,支持不同技术栈服务中心的接入。
  • 基于Serf(gossip 协议的实现)构建无中心的对等网络,成员的自由加入与退出,对 Syncer 网络、服务中心均无影响。
  • 以统一的数据结构在网络中进行传递,数据结构的转换被分散到各个 Syncer 中,其只需要处理当前服务中心数据结构与 SyncData 之间的转换,即可做到数据的最大兼容。
  • 以 golang 插件的形式对服务中心提供支持,用户可自由的扩展需要接入的服务中心。新的服务中心加入,只需在其伴生的 Syncer 进行向 SyncerData 的转换,数据即可在 Syncer 网络中进行同步,无需其他成员配合。
  • 服务的配置、部署、升级、维护等仍在单服务中心内完成,没有额外的业务维护成本增加。

下面我们通过具体的业务流程来进一步了解 Syncer。

 

组网流程

上图左侧绿色 SyncerN 是一个待加入网络的成员。

  1. SyncerN 在启动之后,通过向 JoinAddr 所指向的 SyncerB 发起 Join 请求
  2. 通过 serf 的自动发现与广播机制,一段时间后,SyncerN 的信息会传播到网络中所有成员处,组网成功
  3. 若 Syncer 是以 cluster 模式启动的,Syncer 通过标记的 cluster tag 将相同的 cluster 归为一组,从而实现内部的高可用集群


数据同步流程


Syncer的同步流程同步流程并不复杂,下图具体描述了两个Syncer将不同服务中心的实例进行同步的过程。


适用场景

 

  • 网络互通的异构、多服务中心实例信息同步,支持异构服务中的并存、多服务中心实例共享


上图左,两套服务中心(ServiceCenter 和 Eureka)各自为政,各自辖区的服务无法跨越架构边界,无法发现对方服务实例,从而无法进行通讯。上图右,两套服务中心的实例将通过 Syncer 同步,在两个服务中心里,最后都将呈现出所有的实例,服务之间无障碍发现,从而实现实例的共享通讯。

  • 支持异构服务中心实例任意方向的平滑改造迁移


Syncer统一了同步数据结构 SyncData,并以插件的形式提供对各服务中心的支持,各服务中心只需实现实例数据与 SyncData 的转换,即可完成异构服务中心数据的转换。从而在架构迁移的过程中,可以使用 syncer 实现系统的逐步迁移,平稳过渡。

  • 多微服务技术栈并存时,微服务依据自身诉求自由选型


在企业的发展道路中,经常会出现由于某个核心服务使用了某个技术栈,导致与其对接的服务只能迁就,从而放弃更适合的选型。Syncer 支持异构同步的特性,

可以有效冲破这个限制,使业务选型遵从业务本身诉求。


下面我们将通过一个异构服务中心同步的示例,从实践出发进一步了解 Syncer。

 

ServiceComb-ServiceCenter 与 SpringCloud Eureka 实例互通实践


示例代码:https://github.com/apache/servicecomb-service-center/blob/master/syncer/samples/multi-servicecenters
本案例模拟了异构服务中心之间的通讯场景,包括以下四个部分:

  • EurekaServer: Eureka服务中心
  • AccountServer:注册到Eureka的账号服务
  • Servicecomb-ServiceCenter:Servicecomb-ServiceCenter服务中心
  • HelloServer:注册到Servicecomb-ServiceCenter,需要使用AccountServer的服务

 

运行环境

 

  1. 2台linux机器: (假设为:10.0.0.10 和 10.0.0.11)
  2. JDK 1.8
  3. Maven 3.x
  4. Go 1.11.4
  5. ServiceComb Service-Center 1.3.0

运行前的准备(两台机器都需运行)
下载并解压 ServiceCenter 1.3.0 版本包

$ project_dir=`pwd`
$ wget -O http://us.mirrors.quenda.co/apache/servicecomb/servicecomb-service-center/1.3.0/apache-servicecomb-service-center-1.3.0-linux-amd64.tar.gz
$ tar -zxvf  apache-servicecomb-service-center-1.3.0-linux-amd64.tar.gz

下载样例源码

git clone https://github.com/apache/servicecomb-service-center.git
cd ${project_dir}/servicecomb-service-center/syncer

 

步骤1:启动Eureka环境和服务


机器: 10.0.0.10

1. 编译项目

# 编译 EurekaServer 和 AccountServer
$ cd samples/multi-servicecenters/eureka
$ mvn clean install

2. 启动EurekaServer:
修改启动配置
文件位置:${project_dir}/servicecomb-service-center/syncer/samples/multi-servicecenters/eureka/eureka-server/src/main/resources/application.yaml

spring:
  application:
    name: eureka-server
server:
  port : 8761
#  servlet:
#    context-path: /eureka
eureka:
  instance:
    hostname : 10.0.0.10
  client:
    registerWithEureka : false
    fetchRegistry : false
    serviceUrl:
      defaultZone : http://${eureka.instance.hostname}:${server.port}/eureka/
management:
  endpoints:
    web:
      exposure:
        include: "*"

启动服务

# 启动 EurekaServer
$ cd ${project_dir}/servicecomb-service-center/syncer/samples/multi-servicecenters/eureka/eureka-server/
$ nohup mvn spring-boot:run & >> eureka-server.log 2>&1 &

浏览器打开http://10.0.0.10:8761 ,若出现如下页面,则启动成功

 

3. 启动AccountServer

 

  • 修改启动配置

文件位置:${project_dir}/servicecomb-service-center/syncer/samples/multi-servicecenters/eureka/account-server/src/main/resources/application.yaml

spring:
  application:
    name: account-server
server:
  port: 8090
eureka:
  instance:
    hostname: 10.0.0.10
  client:
    service-url:
      defaultZone: http://${eureka.instance.hostname}:8761/eureka/
management:
  endpoints:
    web:
      exposure:
        include: "*"
  • 启动服务
# 启动 AccountServer
$ cd ${project_dir}/servicecomb-service-center/syncer/samples/multi-servicecenters/eureka/account-server
$ mvn spring-boot:run#启动 AccountServer
$ cd ${project_dir}/servicecomb-service-center/syncer/samples/multi-servicecenters/eureka/account-server
$ mvn spring-boot:run
# 出现如下字样则为成功
2019-09-19 17:20:35.534  INFO 20890 --- [           main] o.s.b.w.embedded.tomcat.TomcatWebServer  : Tomcat started on port(s): 8090 (http) with context path ''
2019-09-19 17:20:35.548  INFO 20890 --- [           main] .s.c.n.e.s.EurekaAutoServiceRegistration : Updating port to 8090
2019-09-19 17:20:35.551  INFO 20890 --- [           main] o.a.s.s.account.AccountApplication       : Started AccountApplication in 3.92 seconds (JVM running for 6.754)
2019-09-19 17:20:35.617  INFO 20890 --- [nfoReplicator-0] com.netflix.discovery.DiscoveryClient    : DiscoveryClient_ACCOUNT-SERVER/10.0.0.10:account-server:8090 - registration status: 2042019-09-19 17:20:35.534  INFO 20890 --- [           main] o.s.b.w.embedded.tomcat.TomcatWebServer  : Tomcat started on port(s): 8090 (http) with context path ''
2019-09-19 17:20:35.548  INFO 20890 --- [           main] .s.c.n.e.s.EurekaAutoServiceRegistration : Updating port to 8090
2019-09-19 17:20:35.551  INFO 20890 --- [           main] o.a.s.s.account.AccountApplication       : Started AccountApplication in 3.92 seconds (JVM running for 6.754)
2019-09-19 17:20:35.617  INFO 20890 --- [nfoReplicator-0] com.netflix.discovery.DiscoveryClient    : DiscoveryClient_ACCOUNT-SERVER/10.0.0.10:account-server:8090 - registration status: 204

此时打开http://10.0.0.10:8761 ,可以看到AccountServer已经注册成功

 

4. 启动Syncer

 

$ cd ${project_dir}/apache-servicecomb-service-center-1.3.0-linux-amd64/
$ ./syncer daemon --sc-addr http://10.0.0.10:8761/eureka --bind-addr 10.0.0.10:30190 --rpc-addr 10.0.0.10:30191 --sc-plugin=eureka
# 出现如下字样则为成功
2019-09-19T17:28:28.809+0800  INFO  etcd/agent.go:55  start etcd success
2019-09-19T17:28:28.809+0800  INFO  grpc/server.go:94 start grpc success
2019-09-19T17:28:28.809+0800  DEBUG server/handler.go:39  is leader: true
2019-09-19T17:28:28.809+0800  DEBUG server/handler.go:43  Handle Tick

 

步骤2:启动Servicecenter环境和服务


机器: 10.0.0.111.

1. 编译项目

# 编译 HelloServer

$ cd samples/multi-servicecenters/servicecenter/hello-server/
$ GO111MODULE=on go build

2. 启动Servicecenter

  • 修改启动配置:

文件位置:${project_dir}/apache-servicecomb-service-center-1.3.0-linux-amd64/conf/app.conf

frontend_host_ip = 10.0.0.11
frontend_host_port = 30103

###################################################################
# sever options
###################################################################
# if you want to listen at ipv6 address, then set the httpaddr value like:
# httpaddr = 2400:A480:AAAA:200::159        (global scope)
# httpaddr = fe80::f816:3eff:fe17:c38b%eth0 (link-local scope)
httpaddr = 10.0.0.11
httpport = 30100
# ...以下省略...
  • 启动 ServiceCenter 和 Frontend
$ cd ${project_dir}/apache-servicecomb-service-center-1.3.0-linux-amd64/
# 启动 ServiceCenter
$ ./start-service-center.sh
# 启动 前端页面 Frontend
$ ./start-frontend.sh

浏览器打开http://10.0.0.11:30103 ,若出现如下页面,则启动成功

3. 启动HelloServer

 

  • 修改启动配置:

文件位置:${project_dir}/servicecomb-service-center/syncer/samples/multi-servicecenters/servicecenter/hello-server/conf/microservice.yaml

service: # 微服务配置
  appId: eureka # eureka 中同步的实例appID均为:eureka
  name: hello-server
  version: 0.0.1
  instance: # 实例信息
    protocol: rest
    listenAddress: 10.0.0.11:8091 #实例监听地址
provider: # 服务端信息
  appId: eureka
  name: account-server
  version: 0.0.1
registry:
  address: http://10.0.0.11:30100

 

  • 启动服务
# 启动 HelloServer
$ cd ${project_dir}/servicecomb-service-center/syncer/samples/multi-servicecenters/servicecenter/hello-server
$ ./hello-server
# 出现如下字样则为成功
2019-09-19T18:37:50.645+0800  DEBUG servicecenter/servicecenter.go:163  send heartbeat success
2019-09-19T18:37:50.645+0800  WARN  servicecenter/servicecenter.go:85 discovery provider failed, appID = eureka, name = account-server, version = 0.0.1
2019-09-19T18:37:50.645+0800  INFO  servicecenter/servicecenter.go:87 waiting for retry

此时打开http://10.0.0.11:30103 ,可以看到HelloServer已经注册成功

但由于无法发现属于Eureka服务中心的AccountServer实例,HelloServer处于重试状态


(注:重试次数为3次,每次间隔30秒,所以我们需要在90秒内完成后面的操作)

 

4. 启动Syncer

$ cd ${project_dir}/apache-servicecomb-service-center-1.3.0-linux-amd64/
$ ./syncer daemon --sc-addr http://10.0.0.11:30100 --bind-addr 10.0.0.11:30190 --rpc-addr 10.0.0.11:30191 --sc-plugin=servicecenter --join-addr 10.0.0.10:30190

 

# 出现以下内容则为Syncer成功启动,并同步了对方的实例
2019-09-19T18:44:35.536+0800  DEBUG server/handler.go:62  is leader: true
2019-09-19T18:44:35.536+0800  DEBUG server/handler.go:79  Receive serf user event
2019-09-19T18:44:35.536+0800  DEBUG serf/agent.go:130 member = xxxxxa, groupName = 0204d59328090c2f4449a088d4e0f1d8
2019-09-19T18:44:35.536+0800  DEBUG serf/agent.go:130 member = xxxxxb, groupName = 34f53a9520a11c01f02f58f733e856b3
2019-09-19T18:44:35.536+0800  DEBUG server/handler.go:97  Going to pull data from xxxxxb 10.0.0.10:30191
2019-09-19T18:44:35.536+0800  INFO  grpc/client.go:76 Create new grpc connection to 10.0.0.10:30191
2019-09-19T18:44:35.538+0800  DEBUG servicecenter/servicecenter.go:87 create service success orgServiceID= account-server, curServiceID = 80784229255ec96d90353e3c041bdf3586fdbbae
2019-09-19T18:44:35.538+0800  DEBUG servicecenter/servicecenter.go:90 trying to do registration of instance, instanceID = 10.0.0.10:account-server:8090
2019-09-19T18:44:35.540+0800  DEBUG servicecenter/sync.go:63  Registered instance successful, instanceID = 78bca3e2daca11e99638fa163eca30e0


步骤3:结果验证

1.此时的HelloServer获取实例成功,并调用了AccountServer的CheckHealth接口

2.分别打开Euraka和ServiceCenter的网页,两个服务中心里均包含了所有的实例信息

3.curl命令调用HelloServer的Login接口

$ curl -X POST \
http://10.0.0.11:8091/login \
-H 'Content-Type: application/json' \
-d '{
  "user":"Jack",
  "password":"123456"
}'
welcome Jack


HelloServer与AccountServer分别会打印如下的信息

AccountServer :


HelloServer:

 

未来展望


ServiceComb Syncer在异构层面,目前已支持ServiceCenter、Eureka两个服务中心,在后面的工作中将对接更多的生态,将增加对跨网络的场景的支持。

以上就是今天对Syncer的介绍,后面会持续对Syncer的新特性进行分享,同时也欢迎感兴趣的小伙伴加入我们,一起做些有意思的事情。

ServiceComb 开发实战(1) —— Service-Center 安装部署 ServiceComb 开发实战(1) —— Service-Center 安装部署 一. Service-Center 是什么 Service-Center(SC)是一个服务注册中心。 服务提供者(provider)可以将自身的实例信息注册到 SC,以供服务消费者(consumer)从 SC 发现并使用它。 在传统服务中,一般将 provider 的实例信息配置到指定的配置文件中,以供 cons... 阅读详情

相关推荐

FPGA中的CMAC硬核与Interlaken硬核

CMAC硬核和Interlaken硬核是FPGA中两种重要的内置功能模块,它们分别在CNN推理和高带宽芯片到芯片接口方面发挥着关键作用。FPGA(Field Programmable Gate Array,现场可编程逻辑门阵列)中的CMAC硬核与Interlaken硬核是两种重要的内置功能模块,它们在FPGA设计中扮演着关键角色。需要注意的是,FPGA设计中的硬核选择不仅取决于硬核本身的性能,还需要考虑硬核与FPGA芯片其他部分的兼容性、功耗、成本等因素。Interlaken硬核。

weixin_41230430的博客 1486

大神讲解微服务治理的技术演进和架构实践

摘要:随着业务的发展,规模扩大,服务越来越多,需要协调线上运行的各个服务,保障服务的SLA;基于服务调用的性能KPI数据进行容量管理,合理分配各服务的资源占用;对故障业务做服务降级、流量控制、流量迁移等快速恢复业务。怎样的服务治理框架能满足需求? 为什么需要服务治理? 第一、业务需求 随着业务的发展,服务越来越多,如何协调线上运行的各个服务,保障服务的SLA,对服务架构和运维人员是一个很大的挑战。随着业务规模的不断扩大,小服务资源浪费等问题逐渐显现,需要能够基于服务调用的性能KPI数据进行容量管.

eight_eyes的博客 787

vcs中systemverilog和c/c++联合仿真

前言 systemverilog中,可以通过DPI、PLI来与外部其它语言的程序进行交互。PLI又分为三类,TF、ACC和VPI,可以认为是PLI技术的三代演进: 其中VPI(PLI3.0)是TF/ACC的一个超集,目前使用的PLI基本上都是VPI。 与PLI技术相独立的另一个技术就是DPI,DPI技术简化了systemverilog与foreign language的交互步骤,对于开发者相对友好,所以使用相对广泛一些。 本文不对DPI中程序调用/数据交互展开讨论(这部分可以参考绿皮书..

kevindas的博客 1万+

dubbo 项目环境组网方案

考虑到研发在项目开发中,因微服务化带来的依赖服务不稳定、联调不方便的问题,为减少开发过程中,因环境问题消耗的成本,现基于dubbo的源码的扩展,提供项目环境组网功能。 项目组网效果 部署说明 项目环境由本地机器启动的应用与开发环境的应用组成。 如上图案例,当前开发的项目涉及变更应用有 用户A负责的service-A,service-B在本地机器启动 用户B负责的service-D,在本地机器启动。 用户B同时在本地启动XXX-web,作为项目环境组网的入口。 调用链路 示例中..

dragonding的专栏 253

S7-200 SMART Modbus RTU从站配置与调试实战指南

本文提供了一份详细的S7-200 SMART PLC配置为Modbus RTU从站的实战指南。内容涵盖从硬件基础、软件准备、指令库调用、核心编程到地址映射与调试排错的完整流程。重点解析了MBUS_INIT与MBUS_SLAVE指令的关键参数配置,并深入探讨了Modbus地址与PLC内部V存储区的对应关系,帮助工程师快速打通通讯链路,实现与上位机、触摸屏等主站设备的稳定数据交互。

potato的博客 756

基于Simulink的无线充电系统LCC补偿网络建模与控制

本文详细介绍了基于Simulink的无线充电系统LCC补偿网络建模与控制方法。首先分析了无线充电系统面临的核心挑战,提出LCC补偿网络解决方案,阐述了其恒流输出和输入阻抗解耦原理。通过Simulink分步演示了系统建模过程,包括松耦合变压器、LCC+LC补偿网络、功率变换级搭建以及频率跟踪控制实现。仿真结果表明,LCC补偿系统在气隙变化和负载跳变下能保持输出电压稳定(波动±3%),效率达89%。文章还总结了工程实现要点,并探讨了动态充电、多负载系统等扩展应用。该教程为开发高效智能的无线充电系统提供了实用指导

amy_mhd的博客 64

Spring boot框架+微服务实现的系统组网图分享

一、背景 上次写测试报告的时候,领导说要加上系统组网图。这不就花了几个小时时间把组网图画了一下,做个记录。以后Spring boot框架+微服务实现的系统要画组网图,都可以按照这个来画。 二、组网图 DMZ区,百度百科定义为:DMZ是英文“demilitarized zone”的缩写,中文名称为“隔离区”,也称“非军事化区”。它是为了解决安装防火墙后外部网络的访问用户不能访问内部网络服务器的问题,而设立的一个非安全系统与安全系统之间的缓冲区。该缓冲区位于企业内部网络和外部网络之间的小网络区域内。在这.

全村的希望的博客 1644

预测股票价格趋势:使用MATLAB进行股票价格预测

通过收集股票数据、数据预处理、构建预测模型以及可视化结果,我们可以利用MATLAB强大的计算和分析功能来预测股票价格的走势。然而,需要注意的是,股票市场具有高度复杂性和不确定性,预测结果仅供参考,并不构成投资建议。然而,借助计算机编程和数据分析工具,我们可以利用历史股价数据来建立模型,并预测未来的股票价格走势。首先,我们需要获取股票的历史价格数据。完成模型的拟合后,我们可以使用该模型来进行未来股票价格的预测。最后,我们可以使用MATLAB的绘图功能将预测的股票价格与实际股票价格进行对比,并进行可视化展示。

2301_79326588的博客 1018

【实战】SpringCloud搭建集群(非局域网)

作者:DCTANT 使用背景:将自己的微服务部署到各个地方,多个地方,通过虚拟机服务器和内网映射(穿透)的方法,通过云服务器的主服务访问这些微服务,以减轻云服务器(主服务)的负担,降低云服务器带来的高昂成本。且由于这些微服务部署到了各个地方,有好几套相同的,以至于挂了1~2个也不会导致整个系统崩溃。 创作背景:网上大部分教程都是基于同一个局域网中部署微服务集群,而没有牵涉到两个及以上处于完全不...

DCTANT的博客 2068

【从0到1实战】C# WinForm开发工业级PLC监控系统(完整串口+Modbus RTU/TCP+数据库存储+源码+避坑指南)

做C#工控上位机开发的工程师,尤其是刚入行的新人,最核心的刚需就是开发一套完整的PLC监控系统。这也是工控领域最基础、最核心、应用最广的项目类型——小到单台PLC的设备测控,大到整线的产线监控,本质都是「上位机与PLC通讯,实现数据采集、参数下发、状态监控、数据存储」。碎片化的知识点学了很多,串口会用了、Modbus协议看了、数据库也懂点,但是始终无法把这些知识点串联起来,做出一套能落地的工业级PLC监控系统。

这里只有干货:从 Modbus 通信到 MES 对接,从 YOLO 训练到工控机部署,带你搞定工业软件开发全流程。 1568

Python爬虫实战:扒取专利数据库核心信息,我用这招搞定反爬+数据结构化(附完整可运行代码)

这套爬虫方案从「实际需求」出发,解决了专利数据库抓取的核心痛点:反爬突破、数据结构化、标题创作。核心价值不在于代码多复杂,而在于「实用」——我用这套代码半天就抓取了800+条Python爬虫相关专利,比手动效率提升了几十倍。最后想说:爬虫技术的核心是「解决问题」,而不是炫技。专利数据能帮我们快速了解行业技术趋势,尤其是程序员,从专利中扒出的核心逻辑,远比零散的博客文章更系统。希望这篇实战分享能帮到有需要的小伙伴,也欢迎在评论区交流专利爬虫的更多技巧!

专注于Python爬虫开发,分享爬虫技巧、项目实战与反爬经验,使用Scrapy、BeautifulSoup等工具,解决数据抓取难题。 2132

如何基于ServiceComb做微服务能力开放

大量的微服务能力需要通过网关开放给用户、其他外部系统访问。网关一方面扮演着汇集用户请求的作用,同时还会扮演认证、鉴权、流量控制、防攻击的用途。同时,由于网关是一个汇聚点,容易形成业务的瓶颈,通常还会采用多级网关机制,最外层的网关提供主备以及简单的请求转发功能,中间层的实现鉴权等功能,多实例部署。常见的可以用于网关的技术和服务包括LVS、Nginx、Zuul等。 ServiceComb 也提供了自...

微服务技术与实践专栏 3799

OV9734 DATASHEET,完整规格书

OV9734完整规格书,包括电气参数,尺寸规格,寄存器配置表等

Spring Cloud Alibaba Sidecar 多语言微服务异构

Spring Cloud Alibaba Sidecar 介绍 自 Spring Cloud Alibaba 2.1.1 版本后增加了 spring-cloud-alibaba-sidecar 模块作为作为一个代理的服务来间接性的让其他语言可以使用spring cloud alibaba等相关组件。通过与网关的来进行路由的映射,从而可以做到服务的获取,然后可以使用Ribbon间接性调用。 如...

冷冷的博客 6560

jdk-8u144-linux-x64.tar.gz.

该资源为搭建Linux系统Java环境用,资源的后缀为tar.gz格式的压缩包

STM32F407中文手册

STM32f407中文手册 本参考手册面向应用开发人员,提供有关使用 STM32F405xx/07xx、STM32F415xx/17xx、 STM32F42xxx 和 STM32F43xxx 微控制器存储器与外设的完整信息。STM32F405xx/07xx、STM32F415xx/17xx、STM32F42xxx 和 STM32F43xxx 构成一个微 控制器系列,各产品具有不同的存储器大小、封装和外设。有关订购信息以及器件的机械与电气特性,请参见数据手册。有关 ARM Cortex™-M4F 内核的信息,请参见《Cortex™-M4F 技术参考手册》。

Apache ServiceComb架构演进:支持多数据中心微服务发现

什么是Apache ServiceCombServiceComb提供了一套包含代码框架生成,服务注册发现,负载均衡,服务可靠性(容错熔断,限流降级,调用链追踪)等功能的微...

微服务技术与实践专栏 498

servicecomb-service-center简介

apache servicecomb-service-center简介

TSIYAO11的专栏 2161

SpringCloud 系列实战 | 第二篇: 搭建服务的提供者(SpringBoot)(2.X版本)

SpringCloud 教程 | 第二篇: 搭建服务的提供者(SpringBoot)(2.X版本) 一、在上一篇文章,讲了服务的注册和发现。在微服务架构中,业务都会被拆分成一个独立的服务,服务与服务的通讯是基于http restful的。本文搭建服务的提供者(provider-server)项目 二、准备工作 这一篇文章基于上一篇文章的工程,启动eureka-server 工程 访问localhost:8900如图所示: 三、开始搭建提供者服务 ...

weixin_42277978的博客 380

微服务简单架构及其重要组件

如今的各大互联网公司项目都不在使用单体架构,而采用微服务架构,今天我们来探讨一下微服务的概念。首先微服务是一种架构风格,他不是一种架构,它是由一些列微小服务构成的,这些服务间要通过某种机制进行通信。下面用一张图来了解一下微服务架构。 可以看出,下方的前端服务和后端服务都是可以集群化的。前端服务和后端服务都要向服务注册发现组件注册。下面详细说一下这几大组件。 1.服务注册与发现:服务的提供方必然要进...

ning1994724的博客 2924

ImageSharp内存映射技术:突破大图像处理瓶颈的零拷贝架构方案

ImageSharp作为.NET平台上的现代化2D图形库,在面对日益增长的大图像处理需求时,通过创新的内存映射技术提供了一套完整的零拷贝解决方案。这项技术不仅解决了传统图像处理中的内存瓶颈问题,更为开发者提供了一种高效、安全且可扩展的大图像处理架构。 ## 传统图像处理的局限性与现代应用挑战 在数字图像处理领域,随着高分辨率相机、医学影像设备和卫星遥感技术的快速发展,图像文件尺寸呈现出指数级增

gitblog_00747的博客 530

Apache ServiceComb Service Center:微服务架构中的核心注册中心

Apache ServiceComb Service Center是一个基于RESTful架构的服务注册中心,专为微服务架构设计,提供完整的服务发现与管理能力。作为微服务生态系统中的核心组件,它解决了分布式系统中服务动态发现与治理的关键问题。 ### 核心特性 1. **服务注册与发现**:支持微服务实例的自动注册与发现,实现服务的动态路由 2. **契约管理**:基于OpenAPI规范,提供

gitblog_01104的博客 592

Apache ServiceComb Service-Center 使用教程

Apache ServiceComb Service-Center 使用教程 servicecomb-service-centerA standalone service center to allow services to register their instance information and to discover providers of a given service项目地址:...

gitblog_00323的博客 913

Apache ServiceComb Service-Center 安装与快速入门指南

cd $GOPATH/src/项目路径 ``` 2. 解决依赖: ```sh GO111MODULE=on go mod download GO111MODULE=on go mod vendor ``` 3. 编译项目: ```sh go build -o service-center cmd/scserver ``` 4. 准备 etcd

gitblog_00736的博客 772

Dubbo 如何连接异构微服务体系

同构微服务体系企业内部的微服务都是基于相同服务框架开发研发的产品,比如全部采用 Dubbo微服务支撑产品。异构微服务体系公司微服务可能使用多个不同的服务框架所建设,多个不同技术栈微服务体系的共存在大型组织还是非常普遍,例如:Dubbo,Sofa-rpc, Brpc等造成异构形式的原因很多,可能是遗留系统带来的,也可能是公司正在做技术栈迁移,或者就是不同业务部门为了满足各自特殊需求而做的独立选型2.2 异构微服务共存。

肖哥弹架构博客 954

另类的异构系统数据交互

    这学期大四,应聘上了深圳一家软件公司实习。现在上班也有一个半星期了吧,上个星期主要是熟悉公司现有项目的业务。昨天开始分配给我一项任务,就是做两个系统的数据交互,一开始还以为要用到webservice之类的东西,所以赶紧到网上查了一堆的资料。后来老大告诉我另外一个项目(数据提供源)的程序不能动,只限于数据库上的操作(源MS SERVER,目的ORACLE10G),那边服务器上提供FTP服务,...

beyondqinghua的专栏 829

pdfrw实战教程:如何轻松实现PDF页面合并与拆分

pdfrw是一个纯Python库,专门用于读取和写入PDF文件,提供了简单高效的PDF页面操作功能。本文将详细介绍如何使用pdfrw轻松实现PDF页面的合并与拆分,让你无需复杂编程知识也能高效处理PDF文档。 ## 为什么选择pdfrw进行PDF页面操作? pdfrw作为轻量级PDF处理库,具有以下优势: - **纯Python实现**:无需依赖复杂的外部库,安装简单 - **直观的API设计

gitblog_00044的博客 400

用了 no-defender 之后 Windows Defender 关不回来?3 步完整恢复

刚跑完 no-defender,Windows 安全中心立刻换了副面孔:「病毒和威胁防护由你的组织管理」挂在最上面,实时保护开关灰成一团,点不动。重启了一遍,还是老样子。先缓口气,这不是系统坏了,而是工具「动了手脚」,可以干净地退回去。这篇文带你用 no-defender 自带的恢复命令把 Windows Defender 重新打开,并亲手验证防护是否真的回来了。 ## 防护重启后依然关着的原因

gitblog_00061的博客 763
上一篇: 与Apache ServiceComb一起玩开源-北邮站
下一篇: 珠联璧合 | ServiceComb 集成 Shiro 实践
looook
博客等级 码龄20年 145粉丝 195原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值