24、Trident与Kafka在互联网电台应用中的实践

Trident与Kafka在互联网电台应用中的实践

1. Trident概述

Trident在Storm的基础原语之上提供了抽象，让我们能以更接近纯粹的“做什么”层面来表达计算，而减少“怎么做”的干扰。它提供了一系列操作，帮助我们以更高的层次进行思考和推理，其API感觉就像一种领域特定语言（DSL）。

1.1 Trident操作类型

Trident有多种不同类型的操作，从高层次来看，主要包括以下几种：
- Functions ：对传入的元组进行操作，并发出一个或多个相应的元组。
- Filters ：决定是否保留或过滤流中的传入元组。
- Splits ：将一个流拆分为多个具有相同数据和字段的流。
- Merges ：只有具有相同字段（相同的字段名和相同数量的字段）的流才能合并。
- Joins ：用于合并大部分字段不同，但有一个或多个公共字段可用于连接的不同流，类似于SQL连接。
- Grouping ：在一个分区内按特定字段进行分组。
- Aggregation ：对元组集合进行聚合计算。
- State updater ：将元组或计算值持久化到数据存储中。
- State querying ：查询数据存储。
- Rep