kafka + mqtt接口实现

最新推荐文章于 2025-08-01 08:31:22 发布

转载

最新推荐文章于 2025-08-01 08:31:22 发布 · 2.7k 阅读

8 ·

CC 4.0 BY-SA版权

原文链接：http://www.cnblogs.com/ryu-manager/p/9472867.html

文章标签：

#大数据 #java #php

本文介绍了一种将MQTT通信与Kafka集群集成的场景，重点在于解决CNC机床使用MQTT的需求。文章提到了两种实现方式：使用mqtt-kafka连接器直接通信，或者设置一个网关。由于缺少合适的Python接口，作者选择了自行实现，提供了简单的代码示例，包括MQTT发布端和Kafka接收端的接口实现。

由于底层的CNC机床必须使用MQTT通信，所以采用MQTT作为底层的通讯协议，再上传到kafka集群。

现在有两种实现方案：一种是使用mqtt-kafka connector,相当于直接使用两者之间的接口通信；另一种是设置一个gateway。

由于暂未找到合适的python接口，所以自己简单实现了一个，代码如下。

mqtt发布端：

import sys
import datetime
import socket, sys
import paho.mqtt.publish as publish
import time

def transmitMQTT(strMsg):
    # strMqttBroker = "led_power.mqtt.iot.gz.baidubce.com"
    # strMqttBroker = "127.0.0.1"
    strMqttBroker = "192.168.3.10"
    strMqttChannel = "confluent-kafka-topic"
    print(len(str(strMsg)))
    publish.single(strMqttChannel, strMsg, hostname=strMqttBroker)

if __name__ == '__main__':
    while True:
        transmitMQTT("te