基本信息

---

下载

文档摘要

---

PAGE1

PAGE1

消息队列：Kafka：Kafka数据持久化与日志压缩

1消息队列：Kafka：Kafka简介

1.1Kafka的基本概念

Kafka是一个分布式流处理平台，由LinkedIn开发并开源，现为Apache软件基金会的顶级项目。它被设计用于处理实时数据流，提供高吞吐量、低延迟和可扩展性。Kafka的核心功能包括：

发布与订阅：Kafka支持消息的发布与订阅模式，类似于传统的消息队列，但更加强调数据的流式处理。

数据持久化：Kafka将数据存储在磁盘上，同时支持数据的复制，以保证数据的持久性和高可用性。

日志压缩：Kafka使用日志压缩技术来减少磁盘空间的