flink数据源六种加载方式以及sink输出方式

目录

一、数据源加载方式

1.  fromElements 

2.加载集合数据源

3.加载文件数据源

4.加载端口号socket

5.加载kafka数据源

6.自定义数据源

二、sink输出方式

1、直接输出在控制台

2、以csv格式输出

3、自定义输出方式

---

一、数据源加载方式

1.  fromElements 

val stream1: DataStream[Any] = env.fromElements(1, 2, 3.5, "hello") 

2.加载集合数据源

   val dataList=List(
       SensorReading("sensor 1",1684201960,36.8),
       SensorReading("sensor 4",1684202060,35.8),
       SensorReading("sensor 4",1684202160,34.8),
       SensorReading("sensor 4",1684202260,33.8)
     )
        val stream2: DataStream[SensorReading] = env.fromCollection(dataList)

case class SensorReading(id: String, timestamp: Long, tempersture: Double)

3.加载文件数据源

    val path="X:\\Spark\\flinkstu\