我们来看一下使用MapStateDescriptor和MapState,基于状态如何累计计算一个用户的交易数据… 继续阅读 Flink从入门到实战八[State]-5-Flink Keyed State MapState API使用方法
分类: 架构之美
Flink从入门到实战八[State]-4-Flink Keyed State ValueState新版API使用方法
我们来看一下使用ValueStateDescriptor和ValueState,基于状态如何累计计算一个用户的… 继续阅读 Flink从入门到实战八[State]-4-Flink Keyed State ValueState新版API使用方法
Flink从入门到实战八[State]-3-Flink Keyed State ValueState旧版API使用方法
我们来看一下使用ValueStateDescriptor和ValueState,基于状态如何累计计算一个用户的… 继续阅读 Flink从入门到实战八[State]-3-Flink Keyed State ValueState旧版API使用方法
Flink从入门到实战八[State]-2-Flink Keyed State
Keyed State基于每个key进行状态存储,是KeyedStream上的状态。支持的数据类型有:Valu… 继续阅读 Flink从入门到实战八[State]-2-Flink Keyed State
Flink从入门到实战八[State]-1-Flink State是什么
什么是Flink有状态计算?在传统的流式计算中,要获取历史计算结果,都是需要从外部获取的,并且为了下次计算能够… 继续阅读 Flink从入门到实战八[State]-1-Flink State是什么
Flink从入门到实战七[ProcessFunction]-5-侧流输出
侧流是什么,这个名字听起来有点奇怪,侧流的作用就是在主流处理过程中,再定义一个或多个输出流,输出一些额外的信息… 继续阅读 Flink从入门到实战七[ProcessFunction]-5-侧流输出
Flink从入门到实战七[ProcessFunction]-4-CoProcessFunction使用
当有两条输入流输入数据,DataStream API提供了CoProcessFunction。CoProces… 继续阅读 Flink从入门到实战七[ProcessFunction]-4-CoProcessFunction使用
Flink从入门到实战七[ProcessFunction]-3-Timer和TimerService
ProcessFunction中一个强大的功能就是定时器了。定时器可以支持我们设定在某个时间触发执行某些必要的… 继续阅读 Flink从入门到实战七[ProcessFunction]-3-Timer和TimerService
Flink从入门到实战七[ProcessFunction]-2-KeyedProcessFunction使用
KeyedProcessFunction是在业务开发中应用最多的ProcessFunction,用在Keyed… 继续阅读 Flink从入门到实战七[ProcessFunction]-2-KeyedProcessFunction使用
Flink从入门到实战七[ProcessFunction]-1-ProcessFunction是什么
Flink从较新的版本之后,API分为四层:1、SQL2、TABLE API3、DataSet/DataStr… 继续阅读 Flink从入门到实战七[ProcessFunction]-1-ProcessFunction是什么
Flink从入门到实战六[Watermark]-5-Flink自带的Watermark
Flink自带的Watermark类,最主要的就是BoundedOutOfOrdernessWatermark… 继续阅读 Flink从入门到实战六[Watermark]-5-Flink自带的Watermark
Flink从入门到实战六[Watermark]-4-自定义Watermark
自定义 Watermark生成器,需要实现WatermarkGenerator接口。 watermark 的生… 继续阅读 Flink从入门到实战六[Watermark]-4-自定义Watermark
Flink从入门到实战六[Watermark]-3-Watermark的使用
WatermarkStrategy 可以在 Flink 应用程序中的两处使用,第一种是直接在数据源上使用,第二… 继续阅读 Flink从入门到实战六[Watermark]-3-Watermark的使用
Flink从入门到实战六[Watermark]-2-Watermark API深入理解
前面的内容我们已经了解了Watermark是什么,简单来说Watermark就是用来解决乱序事件和迟到时间的一… 继续阅读 Flink从入门到实战六[Watermark]-2-Watermark API深入理解
Flink从入门到实战六[Watermark]-1-Watermark是什么
要了解Watermark,要先了解Flink中的时间语义,Flink中的时间分为三种:Event Time 事… 继续阅读 Flink从入门到实战六[Watermark]-1-Watermark是什么
Flink从入门到实战五[Window]-13-Window Interval Join
Window Join按照窗口和相同的key进行两个流的合并,如果没有窗口,可以使用Interval Join… 继续阅读 Flink从入门到实战五[Window]-13-Window Interval Join
Flink从入门到实战五[Window]-12-Window Join
Window 还可以将两个流中的元素进行关联合并。官方解释:窗口连接将共享一个公共Key且位于同一窗口中的两个… 继续阅读 Flink从入门到实战五[Window]-12-Window Join
Flink从入门到实战五[Window]-11-Window Evictor
Window Evictor驱逐器(Evictor)能够在触发器触发之后,窗口函数开始计算之前或之后从窗口中清… 继续阅读 Flink从入门到实战五[Window]-11-Window Evictor
Flink从入门到实战五[Window]-10-Window Trigger
Window Trigger触发器(Trigger)决定了何时启动Window Function来处理窗口中的… 继续阅读 Flink从入门到实战五[Window]-10-Window Trigger
Flink从入门到实战五[Window]-9-Window 滑动计数窗口SlidingCountWindow
前面演示的Window都是基于时间的,我们再来看一个基于滑动计数的Window demo。demo实现的目标很… 继续阅读 Flink从入门到实战五[Window]-9-Window 滑动计数窗口SlidingCountWindow