当前位置:  开发笔记 > 编程语言 > 正文

Spark:没有注册输出操作,因此无需执行任何操作

如何解决《Spark:没有注册输出操作,因此无需执行任何操作》经验,为你挑选了1个好方法。

下面的问题是类似的:使用Twitter的Spark Streaming - 没有注册输出流,所以没有什么可以执行,但我认为在线51使用wordCounts.print()我实际上输出了一些结果.

基本代码:

ssc.start()
      ssc.awaitTermination()
      val lines = messages.map(_._2)
      val words = lines.flatMap(_.split(" "))
      val wordCounts = words.map(x => (x, 1L)).reduceByKey(_ + _)
      wordCounts.print()

或者我在这里误解了什么?要跟进:https: //github.com/dataplayground/playground/blob/master/app/actors/DirectStreamingActor.scala



1> Kaushal..:
ssc.start()
ssc.awaitTermination()

应该是你的代码中的最后一个.

推荐阅读
coco2冰冰
这个屌丝很懒,什么也没留下!
DevBox开发工具箱 | 专业的在线开发工具网站    京公网安备 11010802040832号  |  京ICP备19059560号-6
Copyright © 1998 - 2020 DevBox.CN. All Rights Reserved devBox.cn 开发工具箱 版权所有