利用Avro实现Kakfa序列化和反序列化

最新推荐文章于 2025-04-28 11:24:31 发布

MirandaGirl2018

最新推荐文章于 2025-04-28 11:24:31 发布

阅读量5.4k

点赞数

CC 4.0 BY-SA版权

分类专栏：分布式文章标签： kafka Avro

本文链接：https://blog.youkuaiyun.com/meng984611383/article/details/80528063

本文介绍了如何利用Avro的scheme定义，并通过maven插件生成Java类，实现Kafka消息的序列化和反序列化。内容包括Avro schema的JSON格式，生成Java文件的方法，以及在Kafka Producer和Consumer中的配置应用。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

1 在pom.xml中添加依赖，

1.1 在dependencies中配置：

<dependency>
      <groupId>org.apache.avro</groupId>
      <artifactId>avro</artifactId>
      <version>1.8.2</version>
    </dependency>
    <dependency>
      <groupId>org.apache.avro</groupId>
      <artifactId>avro-tools</artifactId>
      <version>1.8.2</version>
    </dependency>
    <dependency>
      <groupId>org.apache.avro</groupId>
      <artifactId>avro-maven-plugin</artifactId>
      <version>1.8.2</version>
    </dependency>
    <dependency>
      <groupId>org.apache.avro</groupId>
      <artifactId>avro-compiler</artifactId>
      <version>1.8.2</version>
    </dependency>

1.2 在<build>中配置，注意不要加<pluginManagement></pluginManagement>：

<build>
      <plugins>
        <plugin>
          <groupId>org.apache.avro</groupId>
          <artifactId>avro-maven-plugin</artifactId>
          <version>1.8.2</version>
          <executions>
            <execution>
              <phase>generate-sources</phase>
              <goals>
                <goal>schema</goal>
              </goals>
              <configuration>
                <sourceDirectory>${project.basedir}/src/main/avro/</sourceDirectory>
                <outputDirectory>${project.basedir}/src/main/java/</outputDirectory>
              </configuration>
            </execution>
          </executions>
        </plugin>
        <plugin>
          <groupId>org.apache.maven.plugins</groupId>
          <artifactId>maven-compiler-plugin</artifactId>
          <configuration>
            <source>1.8</source>
            <target>1.8</target>
          </configuration>
        </plugin>
      </plugins>
  </build>

2 定义avro的scheme

最低0.47元/天解锁文章