Flink除了可以将结果写入到文本、Socket、Kafka、RabbitMQ等终端,还可以将Flink计算结… 继续阅读 Flink从入门到实战四[DataStream API]-24-Sink数据输出到JDBC
分类: 数据之美
大数据学习心得,大数据教程分享,Nginx技术分享,Nginx技术博文
Flink从入门到实战四[DataStream API]-23-Sink数据输出到Redis
使用Redis作为Sink,我们需要定义一个RedisSink对象,addSink方法中的RedisSink需… 继续阅读 Flink从入门到实战四[DataStream API]-23-Sink数据输出到Redis
Flink从入门到实战四[DataStream API]-22-Sink数据输出到Kafka
Flink Kafka Producer 被称为 FlinkKafkaProducer。它允许将消息流写入一个… 继续阅读 Flink从入门到实战四[DataStream API]-22-Sink数据输出到Kafka
Flink从入门到实战四[DataStream API]-21-Sink数据输出到Socket
我们来看一下,如何将Flink的计算结果输出到Socket。 使用Socket来接收Flink输出结果。1、启… 继续阅读 Flink从入门到实战四[DataStream API]-21-Sink数据输出到Socket
Flink从入门到实战四[DataStream API]-20-Sink数据输出到文件
Flink将计算结果输出到文件,代码如下: 需要注意的是,输出到文件,运行环境并发度要设置为1,即env.se… 继续阅读 Flink从入门到实战四[DataStream API]-20-Sink数据输出到文件
Flink从入门到实战四[DataStream API]-19-Sink数据输出
了解了前面的数据源和数据转换,接下来我们看一下数据输出部分,Flink中定义为Sink。Data sinks … 继续阅读 Flink从入门到实战四[DataStream API]-19-Sink数据输出
Flink从入门到实战四[DataStream API]-18-Transform Window
Window是Flink中无限流处理的核心,Flink中将Window也算作是数据转换算子。Window有多种… 继续阅读 Flink从入门到实战四[DataStream API]-18-Transform Window
Flink从入门到实战四[DataStream API]-17-Transform连接流Connect
Connect的支持将两个类型不同的流合并,输出一个类型为ConnectedStream的流。Connecte… 继续阅读 Flink从入门到实战四[DataStream API]-17-Transform连接流Connect
Flink从入门到实战四[DataStream API]-16-Transform连接流Union
Union的作用是将两个或多个流合并,创建出一个新流,要求作为数据源的流类型一致,最终数据的新流类型和数据源一… 继续阅读 Flink从入门到实战四[DataStream API]-16-Transform连接流Union
Flink从入门到实战四[DataStream API]-15-Transform聚合算子Reduce
DataStream API没有reduce和sum这类聚合操作的方法,因为Flink设计中,数据必须先分组才… 继续阅读 Flink从入门到实战四[DataStream API]-15-Transform聚合算子Reduce
Flink从入门到实战四[DataStream API]-14-Transform分组算子KeyBy
DataStream API没有reduce和sum这类聚合操作的方法,因为Flink设计中,数据必须先分组才… 继续阅读 Flink从入门到实战四[DataStream API]-14-Transform分组算子KeyBy
Flink从入门到实战四[DataStream API]-13-Transform基础算子Map、FlatMap和Filter
Transform的基础算子主要用来做数据转换和过滤,包括:map、flatMap和filter。 Map将D… 继续阅读 Flink从入门到实战四[DataStream API]-13-Transform基础算子Map、FlatMap和Filter
Flink从入门到实战四[DataStream API]-12-Transform数据转换
Transform的作用就是对数据进行处理、转换,Flink中提供了丰富的API,这类API也称为算子。数据在… 继续阅读 Flink从入门到实战四[DataStream API]-12-Transform数据转换
Flink从入门到实战四[DataStream API]-11-Source-官网反欺诈自动生成Demo源码解读
自定义Source,官网有一个比较好的例子,用于生成信用卡交易数据,我们简单来看一下源码。源码主要的功能类有两… 继续阅读 Flink从入门到实战四[DataStream API]-11-Source-官网反欺诈自动生成Demo源码解读
Flink从入门到实战四[DataStream API]-10-Source-自定义数据源
自定义Source,最重要的一个步骤就是实现SourceFunction接口,定义一个Source类。在这个自… 继续阅读 Flink从入门到实战四[DataStream API]-10-Source-自定义数据源
Flink从入门到实战四[DataStream API]-9-Source-从MQ中读取数据
pom文件: 安装 RabbitMQ略 RabbitMQ SourceRMQSource 负责从 Rabbit… 继续阅读 Flink从入门到实战四[DataStream API]-9-Source-从MQ中读取数据
Flink从入门到实战四[DataStream API]-8-Source-从Socket中读取数据
基于Socket的数据源,在之前的demo中已经演示了,我们直接看代码: 测试数据 输出结果
Flink从入门到实战四[DataStream API]-7-Source-从Kafka中读取数据
添加pom依赖: 安装kafka前提是本机需要具备JDK1.8或以上的版本。1、下载kafkahttps://… 继续阅读 Flink从入门到实战四[DataStream API]-7-Source-从Kafka中读取数据
Flink从入门到实战四[DataStream API]-6-Source-从文件中读取数据
Flink 从文件中获取数据 输出结果:
Flink从入门到实战四[DataStream API]-5-Source-从集合中获取数据
Flink 从集合中获取数据,我们直接看代码: 输出结果: