mini商城第14章 热门数据实时收集
一、课题
商品秒杀-热门数据实时收集
二、回顾
1、秒杀设计
2、活动管理
3、搜索管理
4、商品详情处理
5、 数据同步
三、目标
1、掌握热门分析收集方案
2、Lua高级语法
-
掌握Lua高级语法指令执行顺序
-
掌握Lua高级语法指令编写位置
3、Kafka使用
-
Kafka安装
-
Kafka创建队列
-
Kafka发送消息
-
Kafka消费消息
4、Lua垂直日志收集
-
Lua垂直日志收集流程
-
Lua实现Kafka操作
-
Lua垂直日志收集
5、Apache Druid大数据实时处理系统
-
Apache Druid安装
-
Apache Druid数据摄入
-
Apache Druid SQL使用
四、内容
第1章 热门分析收集
在秒杀抢购过程中,热门商品对服务器造成的压力巨大,很有可能直接导致服务器宕机,对热门分析的
实时热门数据收集与分析:Lua、Kafka与Apache Druid实战
本文介绍了在商品秒杀场景下如何进行热门数据实时收集,涉及技术包括Lua、Kafka和Apache Druid。通过Nginx的log_by_lua收集日志,使用Lua操作Kafka进行消息发送,最后通过Apache Druid进行数据实时分析和存储,以发现和处理热门商品。此外,还探讨了Lua的高级操作和DruidSQL的使用。
订阅专栏 解锁全文

被折叠的 条评论
为什么被折叠?



