• About Book
• 术语表
• 入门
  • 简介
  • Introduction
  • 应用场景
  • Use Cases
  • 快速入门
  • Quick Start
  • 软件生态
  • Ecosystem
  • 升级
  • Upgrading
• API
  • 生产者API
  • Producer API
  • 消费者API
    • 老的上层消费者API
    • 老的简单消费者API
    • 新的消费者API
  • Consumer API
    • Old High Level Consumer API
    • Old Simple Consumer API
    • New Consumer API
  • 流处理API
  • Streams API
• 配置
  • Broker配置
  • Broker Configs
  • 生产者配置
  • Producer Configs
  • 消费者配置
    • 老的消费者配置
    • 新的消费者配置
  • Consumer Configs
    • Old Consumer Configs
    • New Consumer Configs
  • Kafka Connect配置
  • Kafka Connect Configs
  • Kafka Streams配置
  • Kafka Streams Configs
• 设计
  • 设计初衷
  • Motivation
  • 持久化
  • Persistence
  • 性能
  • Efficiency
  • 生产者
  • The Producer
  • 消费者
  • The Consumer
  • 消息投递语义
  • Message Delivery Semantics
  • 复制
  • Replication
  • 日志压缩
  • Log Compaction
  • 配额
  • Quotas
• Implementation
  • API Design
  • Network Layer
  • Messages
  • Message format
  • Log
  • Distribution
• Operations
  • Basic Kafka Operations
    • Adding and removing topics
    • Modifying topics
    • Graceful shutdown
    • Balancing leadership
    • Checking consumer position
    • Mirroring data between clusters
    • Expanding your cluster
    • Decommissioning brokers
    • Increasing replication factor
  • Datacenters
  • Important Configs
    • Important Server Configs
    • Important Client Configs
    • A Production Server Configs
  • Java Version
  • Hardware and OS
    • OS
    • Disks and Filesystems
    • Application vs OS Flush Management
    • Linux Flush Behavior
    • Ext4 Notes
  • Monitoring
    • Common monitoring metrics for producer/consumer/connect
    • New producer monitoring
    • New consumer monitoring
  • ZooKeeper
    • Stable Version
    • Operationalization
• Security
  • Security Overview
  • Encryption and Authentication using SSL
  • Authentication using SASL
  • Authorization and ACLs
  • Incorporating Security Features in a Running Cluster
  • ZooKeeper Authentication
    • New Clusters
    • Migrating Clusters
    • Migrating the ZooKeeper Ensemble
• Kafka Connect
  • Overview
  • User Guide
  • Connector Development Guide
• Published with GitBook

Glossary

这里是本书中包含的相关术语及解释

Kafka

Apache Kafka 是一个分布式流平台。

Topic

用于划分 Message 的逻辑概念，一个 Topic 可以分布在多个 Broker 上。

Partition

翻译为分区，他是 Kafka 横向扩展和并行化的基础，每一个 Topic 都可以被至少分为一个 Partition。

Offset

Message 在 Partition 中的偏移量，编号顺序在 Partition 中有序。

Consumer

消费者，从 broker 中消费 Message。

Producer

生产者，向 broker 中发送 Message。

Replication

Kafka 支持以 Partition 为单位对 Message 进行冗余备份，每个 Partition 都可以配置至少 1 个 Replication（当仅 1 个 Replication 时即仅该 Partition 本身）。

Leader

每个 Replication 集合中的 Partition 都会选出一个唯一的 Leader，所有的读写请求都由 Leader 处理。其他 Replicas 从 Leader 处把数据更新同步到本地。

Broker

Kafka 中使用 Broker 来接受 Producer 和 Consumer 的请求，并把 Message 持久化到本地磁盘。每个 Cluster 当中会选举出一个 Broker 来担任 Controller，负责处理 Partition 的 Leader 选举，协调 Partition 迁移等工作。

ISR

In-Sync Replica, 是 Replicas 的一个子集，表示目前 Alive 且与 Leader 能够“Catch-up”的 Replicas 集合。由于读写都是首先落到 Leader 上，所以一般来说通过同步机制从 Leader 上拉取数据的 Replica 都会和 Leader 有一些延迟（包括了延迟时间和延迟条数两个维度），任意一个超过阈值都会把该 Replica 踢出 ISR。每个 Leader Partition 都有它自己独立的 ISR。

Consumer Group

消费者组，各个 consumer 可以组成一个组，每个消息只能被组中的一个 consumer 消费，如果想要一个消息被多个 consumer 消费的话，那么这些 consumer 必须在不同的组。

results matching ""

No results matching ""