小编Wil*_*Wii的帖子

无法解析具有流源的查询,必须使用 writeStream.start() Scala 执行

我无法解决以下异常“带有流源的查询必须使用 writeStream.start();; kafka 执行”

我的代码如下:

val spark = SparkSession
      .builder()
      .getOrCreate()

val bootstrapServers = "localhost:9092"
val topicName = "name"

val df = spark
      .readStream
      .format("kafka")
      .option("kafka.bootstrap.servers", bootstrapServers)
      .option("subscribe", topicName)
      .option("group.id", "Structured-Streaming-kpi")
      .option("failOnDataLoss", false)
      .load()

df.writeStream
      .format("console")
      .start()
      .awaitTermination();
df.show()
Run Code Online (Sandbox Code Playgroud)

scala apache-kafka apache-spark spark-structured-streaming

5
推荐指数
1
解决办法
4145
查看次数