1. 首页
  2. 数据库
  3. 其它
  4. SparkApp自动化分析和故障诊断

SparkApp自动化分析和故障诊断

上传者: 2021-02-01 17:55:25上传 PDF文件 2.32MB 热度 10次
苏宁大数据平台的计算引擎主要包括三个组成部分:离线计算、流式计算、OLAP引擎。离线这块目前主要是依赖Spark和Hive来提供离线数据的分析和挖掘能力。 流式计算这块分为准实时计算和实时流计算。准实时计算主要基于SparkStreaming来满足数秒至分钟级的业务需求,对于实时流这块,目前我们苏宁大概有1200台Openstack虚拟机(400台实体机)组成的 39个Storm集群,并且在2014年就自研了Stor
用户评论