加入收藏 | 设为首页 | 会员中心 | 我要投稿 湖南网 (https://www.hunanwang.cn/)- 科技、建站、经验、云计算、5G、大数据,站长网!
当前位置: 首页 > 教程 > 正文

Apache Flink 漫谈系列 - SQL概览

发布时间:2018-11-15 16:12:14 所属栏目:教程 来源:孙金城
导读:一、SQL简述 SQL是Structured Query Language的缩写,最初是由美国计较机科学家Donald D. Chamberlin和Raymond F. Boyce在20世纪70年月早期从 Early History of SQL 中相识相关模子后在IBM开拓的。该版本最初称为[SEQUEL: A Structured English Query Lang

主措施包罗执行情形的界说,Source/Sink的注册以及统计查SQL的执行,详细如下:

  1. def main(args: Array[String]): Unit = { 
  2. // Streaming 情形 
  3. val env = StreamExecutionEnvironment.getExecutionEnvironment 
  4. val tEnv = TableEnvironment.getTableEnvironment(env) 
  5.  
  6. // 配置EventTime 
  7. env.setStreamTimeCharacteristic(TimeCharacteristic.EventTime) 
  8.  
  9. //利便我们查出输出数据 
  10. env.setParallelism(1) 
  11.  
  12. val sourceTableName = "mySource" 
  13. // 建设自界说source数据布局 
  14. val tableSource = new MyTableSource 
  15.  
  16. val sinkTableName = "csvSink" 
  17. // 建设CSV sink 数据布局 
  18. val tableSink = getCsvTableSink 
  19.  
  20. // 注册source 
  21. tEnv.registerTableSource(sourceTableName, tableSource) 
  22. // 注册sink 
  23. tEnv.registerTableSink(sinkTableName, tableSink) 
  24.  
  25. val sql = 
  26. "SELECT " + 
  27. " region, " + 
  28. " TUMBLE_START(accessTime, INTERVAL '2' MINUTE) AS winStart," + 
  29. " TUMBLE_END(accessTime, INTERVAL '2' MINUTE) AS winEnd, COUNT(region) AS pv " + 
  30. " FROM mySource " + 
  31. " GROUP BY TUMBLE(accessTime, INTERVAL '2' MINUTE), region" 
  32.  
  33. tEnv.sqlQuery(sql).insertInto(sinkTableName); 
  34. env.execute() 

4. 执行并查察运行功效

(编辑:湖南网)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!

热点阅读