MichaelG.Noll:整合Kafka到SparkStreaming——代码示例和挑战

本文,Verisign实验室大规模数据分析基础设施的技术主管Michael通过示例对Kafka整合到SparkStreaming进行了详细讲解,更分享了该领域的现状和一些注意点。作者MichaelG.Noll是瑞士的一位工程师和研究员,效力于Verisign,是Verisign实验室的大规模数据分析基础设施(基础Hadoop)的技术主管。本文,Michael详细的演示了如何将Kafka整合到SparkStreaming中。期间, Michael还提到了将Kafka整合到SparkStreaming中的一些现状,非常值得阅读,虽然有一些信息在Spark1.2版本中已发生了一些变化,比