zrs2004811的博客

原创 flume-kafka-flink-redis:简单实时计算

该流程实现了一个实时数据处理与展示系统：1. 数据采集层：Flume监听order.txt文件，实时采集新增订单数据并发送至Kafka消息队列。2. 数据处理层：Flink消费Kafka数据，通过流处理计算订单总金额和商品类型TopN，结果存储到Redis。3. 数据展示层：SpringBoot服务提供REST API，从Redis获取处理结果并返回JSON格式数据，最终在百度云Sugar大屏实时展示。 核心组件包括： Flume配置exec source监控日志文件 Flink实现流处理逻辑（金额统计、商