it小奋

开发一个服务是简单的，让服务在不可靠和有限资源环境下稳定的运行需要不断的设计优化.场景描述:起源于一流量统计的功能,需要实时或者准实时的计算流数据中每分钟的特定事件类型的数量并存储到关系型数据库中.流数据的处理经由SparkStreaming程序进行处理.第一版:也是最初的版本,采用Spark Streaming的窗口特性每隔1分钟执行一次批量的计数操作并将结果更新到关系型数据库中,在数据量小的情...

目录场景描述:历史优化措施可行性分析硬件设备流量分析峰值预估【单个服务】缓存预估峰值流量处理可行性方案源端转发分布式缓存本地缓存可行性实践案例1问题分析基于Guava的本地缓存基于Guava的令牌桶限流算法参数配置场景描述:平台接入了大量的图片，稳定情况下大概1200张/秒；现有架构下内部系统需要先将这部分数据落地并生...