【大数据面试题】004 Flink状态后端是什么

一步一个脚印,一天一道大数据面试题。

在实时处理中,状态管理是十分常用的。比如监控某些数据是否一直快速增长。那就需要记录到之前的状态,数值。

那作为最热门的实时处理框架,Flink对状态管理是有一套的。那就是状态后端,拿来管理,储存 Flink 里状态的东西,默认是用 MemoryBackend。

Flink 默认有 3 个 Backend
- MemoryStateBackend
将状态存储在内存中。不设置的话,默认用的就是这种。很不稳定,如果程序中断停止,存在内存中的状态就会消失,重启不能正常恢复,处理状态。所有一般不推荐,只推荐自己测试时用。

- FsStateBackend
将状态存储在 FileSystem,如本地文件系统,或 HDFS 文件系统。写入到文件后,如果遇到程序中断停止,能够正常恢复。生产环境中, FsStateBackend 是个不错的选择。

- RockDBStateBackend
需要集群中安装 RockDB,使用 RockDB 存储状态。RocksDB 是一个高效的嵌入式键值存储数据库,专为快速和低延迟存储而设计。所以如果需要更高的性能,可以使用这个状态后端。

相关推荐

  1. 数据面试004 Flink状态什么

    2024-02-08 08:46:03       49 阅读
  2. Flink-状态

    2024-02-08 08:46:03       60 阅读
  3. 数据面试001 Flink 的 Checkpoint 原理

    2024-02-08 08:46:03       48 阅读
  4. 数据面试】023 Spark RDD 什么

    2024-02-08 08:46:03       35 阅读
  5. 数据面试005 谈一谈 Flink Watermark 水印

    2024-02-08 08:46:03       49 阅读
  6. 数据面试007 谈一谈 Flink 背压

    2024-02-08 08:46:03       50 阅读
  7. 数据面试008 谈一谈 Flink Slot 与 并行度

    2024-02-08 08:46:03       43 阅读
  8. Flink State backend状态

    2024-02-08 08:46:03       50 阅读

最近更新

  1. docker php8.1+nginx base 镜像 dockerfile 配置

    2024-02-08 08:46:03       94 阅读
  2. Could not load dynamic library ‘cudart64_100.dll‘

    2024-02-08 08:46:03       100 阅读
  3. 在Django里面运行非项目文件

    2024-02-08 08:46:03       82 阅读
  4. Python语言-面向对象

    2024-02-08 08:46:03       91 阅读

热门阅读

  1. 【Vue项目】filters过滤器

    2024-02-08 08:46:03       52 阅读
  2. List与数组相互转换

    2024-02-08 08:46:03       50 阅读
  3. 突破编程_C++_面试(基础知识(8))

    2024-02-08 08:46:03       49 阅读
  4. C语言:矩阵中的最小元素

    2024-02-08 08:46:03       51 阅读
  5. 51 单片机入门 400 例

    2024-02-08 08:46:03       42 阅读
  6. LeetCode 第28天

    2024-02-08 08:46:03       51 阅读
  7. 12.Swift字典

    2024-02-08 08:46:03       46 阅读