Spark实时计算的开发平台RCS_ 阿里流式分析实战

Spark开发者会将自己的代码完成开发并提交到YARN集群,之后任务的监控、报警、性能优化等都依赖于开发者本身;为此我们为Spark开发者提供一套可以完成任务提交、数据接入、任务监控、任务报警、错误日志查看的一体化实时计算的开发平台real-time computing service。通过我们的平台可以: 自助本地提交任务;jar包版本维护在HDFS上 数据接入覆盖主流中间件:Kafka、MetaQ、TT和SLS 任务的监控、报警、日志处理 Spark任务容灾 Spark集群容灾