Spark实时计算的开发平台RCS——阿里流式分析实战

Spark开发者会将自己的代码完成开发并提交到yarn集群,之后任务的监控、报警、性能优化等都依赖于开发者本身;为spark开发者提供一套可以完成任务提交、数据接入、任务监控、任务报警、错误日志查看的一体化实时计算的开发平台realtime computing service。通过平台可以: 1. 自助本地提交任务;jar包版本维护在hdfs上 2. 数据接入覆盖主流中间件:kafka、metaq
相关文章
相关标签/搜索