Flink的“Exactly Once”语义指的是在流处理过程中,每条记录只被执行一次,没有重复执行和丢失。 … 继续阅读 Flink中的“Exactly Once”语义是什么，如何保证？
分类： 数据之美
大数据学习心得，大数据教程分享，Nginx技术分享，Nginx技术博文
Hadoop中的数据压缩如何影响计算效率？代码举例讲解
数据压缩会对Hadoop的计算效率产生以下影响: 1、 提高磁盘空间利用率和I/O效率: 压缩后的数据体积更小… 继续阅读 Hadoop中的数据压缩如何影响计算效率？代码举例讲解
Hive中如何进行数据归一化操作？代码举例讲解
在Hive中,我们可以使用以下方式进行数据归一化操作: 1. NORMALIZE: NORMALIZE函数可以… 继续阅读 Hive中如何进行数据归一化操作？代码举例讲解
Flink如何处理乱序数据？
Flink处理乱序数据主要有两种方式: 增加数据的watermark。这可以指定数据的事件时间,Flink会根… 继续阅读 Flink如何处理乱序数据？
Flink面试题（6-10）
6、Flink中如何实现数据源和数据接收器？ Flink可以从多种数据源获取数据，如Kafka、RabbitM… 继续阅读 Flink面试题（6-10）
Hadoop中如何处理大量小文件的问题？代码举例讲解
在Hadoop中处理大量小文件的问题的主要方式是: 1、 合并小文件: 使用文件合并工具如CombineFil… 继续阅读 Hadoop中如何处理大量小文件的问题？代码举例讲解
Hive中如何进行数据过滤操作？代码举例讲解
在Hive中,我们可以使用以下方式进行数据过滤操作: 1. WHERE: WHERE子句可以用于进行行过滤。 … 继续阅读 Hive中如何进行数据过滤操作？代码举例讲解
Flink如何实现流的迭代计算？
Flink实现流的迭代计算主要通过DataStream的iterate()方法。该方法将一个数据流不断反复进行… 继续阅读 Flink如何实现流的迭代计算？
Hadoop中的负载均衡是如何实现的？代码举例讲解
在Hadoop中实现负载均衡的主要方式是: 1、 HDFS的块大小和副本数设置: 合理的块大小可以使数据均匀分… 继续阅读 Hadoop中的负载均衡是如何实现的？代码举例讲解
Hive中如何进行数据采样操作？代码举例讲解
在Hive中,我们可以使用以下方式进行数据采样操作: 1. TABLESAMPLE: TABLESAMPLE子… 继续阅读 Hive中如何进行数据采样操作？代码举例讲解
Flink面试题（1-5）
1、什么是Apache Flink？2、Flink与Hadoop和Spark有何不同？3、Flink的核心概念… 继续阅读 Flink面试题（1-5）
Flink的流式处理和批处理有什么不同？
Flink的流式处理和批处理主要有以下不同: 数据源不同。流式处理读取实时持续产生的数据流,批处理读取静态已完… 继续阅读 Flink的流式处理和批处理有什么不同？
Hadoop中如何进行数据的排序？代码举例讲解
在Hadoop中实现数据排序的主要方式是: 使用Comparator比较器自定义排序: 实现WritableC… 继续阅读 Hadoop中如何进行数据的排序？代码举例讲解
Hive中如何进行数据统计操作？代码举例讲解
在Hive中,我们可以使用以下方式进行数据统计操作: 1. COUNT(): COUNT()函数不仅可以用于计… 继续阅读 Hive中如何进行数据统计操作？代码举例讲解
Flink的数据处理流程是怎样的？
Flink的数据处理流程主要分为以下几个步骤: Source – 读取数据源。这可以是文件、Kaf… 继续阅读 Flink的数据处理流程是怎样的？
Hadoop中的网络通信是如何实现的？代码举例讲解
在Hadoop中实现网络通信的主要方式是: 使用RPC(Remote Procedure Call)实现节点间… 继续阅读 Hadoop中的网络通信是如何实现的？代码举例讲解
Hive中如何进行数据汇总操作？代码举例讲解
在Hive中,我们可以使用以下方式进行数据汇总操作: 1. COUNT(): COUNT()函数可以用于统计行… 继续阅读 Hive中如何进行数据汇总操作？代码举例讲解
Flink的处理语义是什么？
Flink 提供两种主要的处理语义: At-least-once:至少一次,保证每个记录至少被处理一次,可能会… 继续阅读 Flink的处理语义是什么？
Hadoop中的文件读写是如何实现的？代码举例讲解
在Hadoop中实现文件读写的主要方式是: 使用FileSystem API对HDFS进行操作: 获取File… 继续阅读 Hadoop中的文件读写是如何实现的？代码举例讲解
Hive中如何进行数据透视操作？代码举例讲解
在Hive中,我们可以使用以下方式进行数据透视操作: 1. PIVOT: PIVOT操作可以对数据进行透视,将… 继续阅读 Hive中如何进行数据透视操作？代码举例讲解