Flink 2.0 状态管理存算分离架构演进

发布时间：2024年01月12日

Flink 2.0 状态管理存算分离架构演进


在这里插入图片描述
首先简单来说一下，flink2.0做存算分离，最最主要的一点是解决，大状态的问题，例如一个超过50T的物流数据，大状态恢复可能就要1天，所以才有存算分离这么一个设计初衷。

下面先来看一下 任务是怎么执行提交的，看一下state在整个流程里 处于一个什么位置
在这里插入图片描述

在这里插入图片描述
在这里插入图片描述
在当前容器化的常见用法，任务在启动起来以后，本地盘的大小已经固定了，现在如果用单pod跑，如果本地盘满了，基本只有扩并发一个办法。

在这里插入图片描述

文章来源:https://blog.csdn.net/Direction_Wind/article/details/135535014
本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。
最新文章