记一次服务优化的历程

开发一个服务是简单的，让服务在不可靠和有限资源环境下稳定的运行需要不断的设计优化. 场景描述:起源于一流量统计的功能,需要实时或者准实时的计算流数据中每分钟的特定事件类型的数量并存储到关系型数据库中.流数据的处理经由SparkStreaming程序进行处理. 第一版:也是最初的版本,采用Spark Streaming的窗口特性每隔1分钟执行一次批量的计数操作并将结果更新到关系型数据库中,在数据量小

>>阅读原文<<