kafka生产者示例（kafka-python producer example）

最新推荐文章于 2025-05-30 09:00:00 发布

原创最新推荐文章于 2025-05-30 09:00:00 发布 · 7.5k 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#kafka

linux技术专栏收录该内容

65 篇文章

订阅专栏

本文介绍了一个使用Python并发向Kafka发送消息的例子。通过多进程技术同时启动两个进程，每个进程向Kafka的'test_msg'主题发送1000条消息。此示例展示了如何配置KafkaProducer并利用multiprocessing模块进行高效的消息发布。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

import multiprocessing
import time
from kafka import KafkaProducer


def worker(ch):
    producer = KafkaProducer(bootstrap_servers='127.0.0.1:9092')

    for i in range(1000):
        time.sleep(0.01)
        print 'produce msg', i
        producer.send('publish_msg', ch * 1024)


if __name__ == '__main__':
    p1 = multiprocessing.Process(target=worker, args=('1',))
    p2 = multiprocessing.Process(target=worker, args=('2',))
    p1.start()
    p2.start()