分布式服务架构学习（十）：实现自己的序列化工具引擎（九）-序列化Avro实现

Avro序列化解析

最新推荐文章于 2024-07-22 15:12:15 发布

原创最新推荐文章于 2024-07-22 15:12:15 发布 · 265 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#分布式 #序列化 #avro序列化 #avro

架构同时被 3 个专栏收录

14 篇文章

订阅专栏

分布式服务架构学习

11 篇文章

订阅专栏

序列化

10 篇文章

订阅专栏

本文深入探讨了Apache Avro的数据序列化项目，介绍了其动态类型、无标记数据和自动字段ID分配的特点。Avro支持二进制和JSON编码，提供了与Thrift、protobuf相似的功能，但简化了使用流程。文章还展示了AvroSerializer类的具体实现，包括序列化和反序列化的代码示例。

Avro是一个数据序列化的项目，最开始是Hadoop的子项目之一，最后加入Apache成为独立的开元项目。Avro提供的功能类似于其他的编组系统，如Thrift、protobuf等。

Aro的主要不同之处在于：动态类型、无标记数据、不用手动分配字段ID。

另外，Avro支持两种序列化编码方式：二进制编码和JSON编码。

代码如下：

package ares.remoting.framework.serialization.serializer.impl;


import ares.remoting.framework.serialization.serializer.ISerializer;
import org.apache.avro.io.*;
import org.apache.avro.specific.SpecificDatumReader;
import org.apache.avro.specific.SpecificDatumWriter;

import java.io.ByteArrayInputStream;
import java.io.ByteArrayOutputStream;

/**
 * @author fuss created on 18/7/23.
 * @version $Id$
 */
public class AvroSerializer implements ISerializer {


    @Override
    public <T> byte[] serialize(T obj) {
        try {
            DatumWriter userDatumWriter = new SpecificDatumWriter(obj.getClass());
            ByteArrayOutputStream outputStream = new ByteArrayOutputStream();
            BinaryEncoder binaryEncoder = EncoderFactory.get().directBinaryEncoder(outputStream, null);
            userDatumWriter.write(obj, binaryEncoder);
            return outputStream.toByteArray();
        } catch (Exception e) {
            throw new RuntimeException(e);
        }
    }


    @Override
    public <T> T deserialize(byte[] data, Class<T> clazz) {
        try {
            DatumReader userDatumReader = new SpecificDatumReader(clazz);
            BinaryDecoder binaryDecoder = DecoderFactory.get().directBinaryDecoder(new ByteArrayInputStream(data), null);
            return (T) userDatumReader.read(clazz.newInstance(), binaryDecoder);
        } catch (Exception e) {
            throw new RuntimeException(e);
        }

    }


}

maven依赖配置，代码如下：

<!-- avro -->
        <dependency>
            <groupId>org.apache.avro</groupId>
            <artifactId>avro</artifactId>
            <version>1.8.1</version>
        </dependency>
        <dependency>
            <groupId>org.apache.avro</groupId>
            <artifactId>avro-ipc</artifactId>
            <version>1.8.1</version>
        </dependency>