Kafka,kafka特点
Kafka,kafka特点
Kafka是由Apache软件基金会开发的开源流处理平台，主要使用Scala和Java语言编写。它是一个高性能的消息队列系统，同时也支持分布式流处理。 Producer：Producer负责生成消息，是消息系统的入口。 Kafka Cluster：- Broker：Kafka实例被称为Broker，每台服务器可以运行一个或多个Broker实例。
Kafka的主要特点包括： 分布式：Kafka是一个分布式系统，可以部署在多台机器上，以处理大量数据。 发布-订阅模型：Kafka支持发布-订阅消息模型，这意味着消息可以从一个或多个生产者发送到多个或一个消费者。 高吞吐量：Kafka能够处理大量的数据，其吞吐量可以达到数千个消息每秒。
Kafka是一个分布式的、高吞吐量的流处理平台，它具有以下主要特点： **高吞吐量**：Kafka通过使用多副本机制和分布式架构，可以有效地处理大量的数据流，同时保持高性能和稳定性。
Kafka特点包括：提供大量消息处理能力，以高容错性存储海量数据流，保证数据流顺序，消息归类于Topic，生产者为Producer，消费者为Consumer，集群由多个实例（broker）构成，系统依赖zookeeper保存meta信息。与MQTT协议相比，Kafka适用于大数据处理，侧重数据存储与读取，强调实时性高的流式数据处理。
主要特点 Kafka具有高性能、可扩展性和容错性。它支持分布式部署，可以在普通硬件上运行，并通过复制和分区机制确保数据的持久性和可用性。此外，Kafka的设计易于水平扩展，可以处理数以万计的消息和数千个并发连接。它允许消费者以异步的方式处理消息，因此具有低延迟的特性。
1、kafka支持的特性如下：消息持久化和缓存。Kafka高度依赖文件系统来存储和缓存消息。一般的人都认为“磁盘是缓慢的”，这使得人们对“持久化结构提供具有竞争性的性能”这样的结论持有怀疑态度。
2、Kafka的特性：- 高吞吐量、低延迟：kafka每秒可以处理几十万条消息，它的延迟最低只有几毫秒，每个topic可以分多个partition， consumer group 对partition进行consume操作。
3、主要特性 Kafka是一种高吞吐量 的分布式发布订阅消息系统，有如下特性：通过O（1）的磁盘数据结构提供消息的持久化，这种结构对于即使数以TB的消息存储也能够保持长时间的稳定性能。高吞吐量：即使是非常普通的硬件Kafka也可以支持每秒数百万的消息。支持通过Kafka服务器和消费机集群来分区消息。
4、分布式特性：Kafka系统是一个分布式的系统，其数据被分散存储在多个Broker上，每个Broker可以存储不同的Topic的数据。这种设计使得Kafka具有很高的可扩展性，可以轻松地增加或减少Broker节点来适应不同的需求。同时，Kafka支持数据复制和容错机制，保证了数据的可靠性和系统的稳定性。
5、Kafka一个很重要的特性就是，只需写入一次消息，可以支持任意多的应用读取这个消息。换句话说，每个应用都可以读到全量的消息。为了使得 每个应用都能读到全量消息，应用需要有不同的消费组 。
6、x版本默认开启主题删除功能，支持磁盘故障转移和副本跨路径迁移，增强kafka streams和connect。x版本优化吞吐性能，支持ZStandard压缩，改进生产者和消费者特性。升级方案与建议升级kafka版本时，建议采用停机升级-重建部署方案。确保kafka集群和客户端版本一致，以减少升级过程中出现的问题。
