主题:DIEM 源码

迪姆 Python,Spark,REST,Scala,管道,调度,API,自定义作业,SQL语句,Openshift,云原生,机器学习,Sendgrid,Kubernetes,Slack,云对象存储,JDBC,Box Diem可用于创建,显示,执行和维护硬件和数据库平台之间的数据传输。 它将介绍如何创建和管理转移并将其分配到计划中以定期执行而无需人工干预。 Diem为SPARK ETL(提取,转换,加载)提供了前端,SPARK ETL是一种SQL数据管道,可用于在RDMS平台之间同步数据。 该工具由称为作业的单个传输操作组成,将执行SQL语句以从源系统中选择数据并在目标系统上插入或复制数据。 Diem允许用户使用解释性编程语言Python创建脚本,并使用Cron(Unix系统的工作计划程序)创建复杂的计划。Python和Cron的结合以及定义和执行自定义SQL语句的内在能力,