SparkStreaming
火花流##配置从Apache下载spark-1.1.0-bin-hadoop2.4设置主节点和工作节点通过运行sbin/startall.sh启动Spark请修改Properties.java以设置文件路径和Spark Streaming的频率##怎么跑?在启动SparkStreaming之前,您可以使用以下命令打开一个写入套接字进行测试nc -lk 9999然后运行SparkStreaming cd SparkStreaming mvn clean mvn package spark-1.1.0-bin-hadoop2.4/bin/spark-submit --class soc.SparkStreaming --master spark://{USERNAME}.local:7077 --num-executors 3 --d
用户评论