Apache Flink 漫谈系列(15) - DataStream Connectors之Kafka
发布时间:2019-01-19 12:08:17 所属栏目:教程 来源:孙金城
导读:一、聊什么 为了满意本系列读者的需求,我先先容一下Kafka在Apache Flink中的行使。以是本篇以一个简朴的示例,向各人先容在Apache Flink中怎样行使Kafka。 二、Kafka 简介 Apache Kafka是一个漫衍式宣布-订阅动静转达体系。 它最初由LinkedIn公司开拓,Li
测试运行如下: 简朴表明一下,我们输入数如下: 我们看的5000000~7000000之间的数据,个中B#5000000, C#5000100和E#5000120是统一个窗口的内容。计较MAX值,按字符串较量,最大的动静就是输出的E#5000120。 4. Kafka携带Timestamps 在Kafka-0.10+ 动静可以携带timestamps,也就是说不消单独的在msg中表现添加一个数据列作为timestamps。只有在写入和读取都用Flink时辰简朴一些。一样平常环境用上面的示例方法已经足够了。 四、小结 (编辑:湖南网) 【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容! |