spark deep learning:适用于Apache Spark的深度学习管道 源码

适用于Apache Spark的深度学习管道 该仓库仅包含用于本地CI和API文档的HorovodRunner代码。 要使用HorovodRunner进行分布式培训,请使用Databricks Runtime进行机器学习,请访问databricks doc 文档有关。 要使用包含Spark深度学习管道API的先前版本,请转到。 API文档 class sparkdl.HorovodRunner(*,np,driver_log_verbosity ='all') 基础: object HorovodRunner使用Horovod运行分布式深度学习培训工作。 在Databricks Runtime 5.0 ML及更高版本上,它将Horovod作业作为分布式Spark作业启动。 通过管理集群设置并与Spark集成,它使在Databricks上轻松运行Horovod变得容易。 查看Dat