基于 Flink 的实时数仓平台

咱们组目前负责部门的大数据平台，既搭建平台，也是数据开发，仍是业务开发。当前数据链路大概以下： 埋点数据，日志 -》kinesis -》s3 -》presto -》mysql -》报表。还有机器学习等。mysql 这些全是依赖aws提供的服务来构建的。为了避免影响后续的开发，须要重新梳理流程，优化流程。web 通过分析，咱们目前主要是统计分析性质的，使用presto、flink处理数据，而后汇总到

>>阅读原文<<