sql实现TVF的滑动窗口
//TVF 中的hop滚动窗口 //hop(table sensor,descriptor(et),interval '2' second,interval '5' second ):作为一张表存在 //first interval :滑动步长 , second interval :窗口长度 //特别注意!!!! // 1.TVF 中滑动窗口的滑动步长与窗口长度必须是整数倍的关系 , 不然会报错 // 例如:滑动步长为2 , 窗口长度就不能为5 , 可以为6 // 2.如果在sql中使用了hop窗口 , 则一定需要group by,而且group by后一定有window_start,window_end两个字段 package net.cyan.FlinkSql.TVF; ? import net.cyan.POJO.WaterSensor; import org.apache.flink.api.common.eventtime.WatermarkStrategy; import org.apache.flink.streaming.api.datastream.DataStream; import org.apache.flink.streaming.api.environment.StreamExecutionEnvironment; import org.apache.flink.table.api.Table; import org.apache.flink.table.api.bridge.java.StreamTableEnvironment; ? import java.time.Duration; ? import static org.apache.flink.table.api.Expressions.$; ? public class Demo2_Window_TVF_Hop { public static void main(String[] args) { //创建执行环境 StreamExecutionEnvironment env = StreamExecutionEnvironment.getExecutionEnvironment(); //创建表的运行环境 StreamTableEnvironment tabEnv = StreamTableEnvironment.create(env); env.setParallelism(1); DataStream<WaterSensor> waterSensorStream = env.fromElements( new WaterSensor("sensor_1", 1000L, 10), new WaterSensor("sensor_1", 2000L, 20), new WaterSensor("sensor_2", 3000L, 30), new WaterSensor("sensor_1", 4000L, 40), new WaterSensor("sensor_1", 5000L, 50), new WaterSensor("sensor_2", 6000L, 60)) .assignTimestampsAndWatermarks( WatermarkStrategy .<WaterSensor>forBoundedOutOfOrderness(Duration.ofSeconds(3)) .withTimestampAssigner((ws, ts) -> ws.getTs()) ? ); //创建table Table table = tabEnv.fromDataStream(waterSensorStream,$("id"),$("ts"),$("vc"),$("et").rowtime()); //创建表 tabEnv.createTemporaryView("sensor",table); //执行sql //TVF 中的hop滚动窗口 //hop(table sensor,descriptor(et),interval '2' second,interval '5' second ):作为一张表存在 //first interval :滑动步长 , second interval :窗口长度 //特别注意!!!! // 1.TVF 中滑动窗口的滑动步长与窗口长度必须是整数倍的关系 , 不然会报错 // 例如:滑动步长为2 , 窗口长度就不能为5 , 可以为6 // 2.如果在sql中使用了hop窗口 , 则一定需要group by,而且group by后一定有window_start,window_end两个字段 tabEnv.sqlQuery("select" + "window_start,window_end,id," + "sum(vc) sum_vc" + " from table (hop(table sensor,descriptor(et),interval '2' second,interval '6' second ))" + " group by window_start,window_end,id ") .execute() .print(); ? ? ? } }
经验总结扩展阅读
- 云小课|MRS基础原理之MapReduce介绍
- SLAM中的内外点
- vulnhub靶场之NOOB: 1
- 世界上最丑陋的鱼类之一
- 世界上脸最像人类的鱼排行榜
- 世界上最大的带鱼是什么 鲱王皇带鱼体长在3米到10米之间
- 原神机械之心任务怎么完成
- 支持JDK19虚拟线程的web框架,之二:完整开发一个支持虚拟线程的quarkus应用
- 金铲铲之战黯灵龙技能是什么
- 金铲铲之战巨岩龙是怎么样的
