在flink中哪个是基于批处理的图计算库(gelly)

2024-05-21 1:40:31 电影资讯 4939125

375|0条评论

在flink中哪个是基于批处理的图计算库

在flink中Gelly是基于批处理的图计算库作为分布式数据处理框架，Flink同时提供了支撑计算和批计算的接口，同时在此基础上抽象出不同的应用类型的组件库，如基于流处理的CEP（复杂事件处理库）、SQL&Table库和基于批处理的FlinkML（机器学习库）等、Gelly（图处理库）等。

Flink架构、原理

当用户提交一个Flink程序时，会首先创建一个Client，该Client首先会对用户提交的Flink程序进行预处理，并提交到Flink集群中处理，所以Client需要从用户提交的Flink程序配置中获取JobManager的地址，并建立到JobManager的连接，将Flink Job提交给JobManager。

在Flink整个软件架构体系中，统一遵循了分层的架构设计理念，在降低系统耦合度的同时，为上层用户构建Flink应用提供了丰富且友好的接口。整个Flink的架构体系可以分为三层：Deployment层：该层主要涉及了Flink的部署模式，Flink支持多种部署模式：本地、集群（Standalone/YARN），云（GCE/EC2），Kubernetes等。

高吞吐量和低延迟：Flink 框架能够处理大规模数据流，并且具有高吞吐量和低延迟的特性。这意味着它可以处理大量的数据，并且可以在很短的时间内完成数据处理任务。流处理和批处理：Flink 框架支持流处理和批处理两种模式。

Flink采用Master-Slave架构，其中JobManager作为集群Master节点，主要负责任务协调和资源分配，TaskWorker作为Salve节点，用于执行流task。除了JobManager和TaskManager，还有一个重要的角色就是Client。Client虽然不是Flink Cluster 运行态的一部分，但也是Flink重要组件之一，用来提交流任务。

内存处理：Flink使用内存来存储中间结果，这大大提高了处理速度和效率。通过将数据存储在内存中，Flink可以快速检索和处理数据，而无需等待磁盘I/O或网络传输。分布式执行：Flink框架还支持分布式执行，这意味着它可以处理大规模的数据流，并在多个节点上并行执行计算。

做到资源的合理配置。整个flink的架构简单的说是中心控制（jobManager）+ 多点分布执行（taskManager）弹性的资源分配主要来自于taskManager的有效管理和配置。在启动flink 之前，在核心的配置文件里面，需要指定两个参数。taskmanager.numberOfTaskSlots 和 parallelism.default。首先需要明白slot的概念。

gelly是什么车

1、gelly是吉利汽车。gelly是吉利的英文名称。吉利汽车的英文全称是gelly auto。吉利汽车集团隶属于浙江吉利控股集团，总部位于中国浙江杭州。旗下拥有吉利汽车、领克品牌、几何品牌、沃尔沃汽车、伦敦出租车等品牌。吉利早期的车标，LOGO里面的白色是抽象的六个六，表示六六大顺。跟什么蓝天白云之类的没有任何关联。

2、geely是吉利汽车。吉利汽车的英文全称是gellyauto。隶属于浙江吉利控股集团，总部位于中国浙江省杭州市。该品牌创立于1997年，主营业务为汽车制造。现任董事长李书福，英文简称吉利。吉利汽车的LOGO：在吉利早期的logo中，LOGO里面的白色是抽象的六六，意思是六六大运。它与蓝天白云之类的东西无关。

3、gelly是什么车 gelly是吉利汽车的英文名称。吉利汽车隶属于浙江吉利控股集团，总部位于中国浙江杭州。吉利汽车集团旗下拥有吉利汽车、领克品牌、几何品牌、沃尔沃汽车、伦敦出租车等品牌。吉利早期的车标LOGO里面的白色是抽象的六个六，表示六六大顺。跟蓝天白云之类的没有任何关联。