9、分布式服务的数据复制、测试与可观测性实现

分布式服务的数据复制、测试与可观测性实现

1. 服务复制功能的实现

为了让服务在集群中有多个服务器时存储日志数据的多个副本，我们可以添加复制功能，这能增强服务对故障的恢复能力。例如，当某个节点的磁盘发生故障且无法恢复数据时，复制功能可以确保在其他磁盘上有数据副本。

复制采用拉取式（pull-based），即复制组件从每个发现的服务器消费数据，并在本地服务器生成副本。在拉取式复制中，消费者会定期轮询数据源，检查是否有新数据可供消费；而在推送式（push-based）复制中，数据源会将数据推送给副本。

以下是实现复制功能的具体步骤：
1. 创建复制组件文件 ：在 internal/log 目录下创建 replicator.go 文件，代码如下：

package log

import (
    "context"
    "sync"

    "go.uber.org/zap"
    "google.golang.org/grpc"

    api  "github.com/travisjeffery/proglog/api/v1"
)

type Replicator  struct {
    DialOptions []grpc.DialOption
    LocalServer api.LogClient

    logger *zap.Logger

    mu      sync.Mutex
    servers  map [ string ] chan  struct {}