qq_25037905的博客

flink 顶层架构：离线和实时，所有数据都是流，如果流有界比如一个小时数据，就是离线批处理，如果流是无界就是实时数据。spark顶层架构：所有处理都是有界数据的批处理，实时的是数据量比较的快速处理。flink 集成了几种常见的资源管理器：hadoop yarn,apache mesos,k8。yarn 专注大数据的资源调度管理，mesos专注通用的资源调度管理。yarn 专注大数据的资源管理，资源粗粒度管理资源利用率低一些；mesos专注通用的资源管理，资源细粒度管理资源利用率高一些，但会有一些问题。k8

import java.util.*; import java.util.concurrent.ConcurrentHashMap; public class SensitiveFilter { public enum MatchType { MIN_MATCH("最小匹配规则"),MAX_MATCH("最大匹配规则"); String desc;...

import java.util.HashMap; import java.util.Iterator; import java.util.Map; /** * 漏桶算法 * capacity * 1000是为了更精确, 漏水的小洞更小^~^ */ public class RateLimiter { private static final int DEFAULT_LIMIT...