kafka常用操作

kafka的相关概念

折叠代码块YAML 复制代码

broker: 消息的服务器，
生产者: 生产消息，消息会传到消息主题（topic）
消费者: 消费topic下的消息，可订阅一个或多个topic
topic: 一组消息的归纳，将消息分类，如大数据的topic或人工智能的topic
partition: 将topic分成小块，便于并发吞吐，叫做消息的分区，可存到多个物理分区
offset: 偏移量，消费者已消费数据的位置记录
stream: Kafka自带的将程序转为流式程序的功能，可以消费topic，并将结果输出到新的topic
Connector: 构建可重用的生产者或消费者
ConsumerGroup: 多个消费者组成一个消费者组，便于广播消息