spark 2.4.5 bin without hadoop.tgz
spark-2.4.5-bin-without-hadoop.tgz spark最新已编译好的包,不包含hadoop jar。
使用时需要在spark-env.sh中配置
export SPARK_DIST_CLASSPATH=$(hadoop --config /opt/bigdata/hadoop-2.9.2/etc/hadoop classpath)
export HADOOP_CONF_DIR=$HADOOP_HOME/etc/hadoop
下载地址
用户评论