python发送avro文件

生成avro文件,并写入二进制,使用python2,python3需要适配修改

1.avsc文件schema格式:

文件名:type111.avsc

{
    "type": "record",
    "name": "test",
    "fields": [
        {"name": "version", "type": "string"},
        {"name": "name", "type": "string"},
        {"name": "card", "type": "string"}
    ]
}

 2. 代码示例

#! -*- coding:utf-8 -*
import json
import os
import time
from io import BytesIO

import avro
from avro.datafile import DataFileWriter
from avro.io import DatumWriter, BinaryEncoder

# avsc文件夹,schema
avsc_dir = r"E:\avro_data\avsc_data"
# 生成的avro文件夹
avro_dir = r"E:\avro_data\data"


def generate_avro_file(data_list, schema_type):
    """
    生成AVRO
    :param data_list: 要写入的数据列表
    :retur
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值