首先让我们开始实施配置，然后我们将设置迁移到单节点多个代理配置.
希望你能已经在你的机器上安装了Java，ZooKeeper和Kafka.在转移到Kafka群集设置之前，首先需要启动ZooKeeper，因为Kafka Cluster使用ZooKeeper.
启动ZooKeeper
打开一个新终端并键入以下命令 :
bin/zookeeper-server-start.sh config/zookeeper.properties
要启动Kafka Broker，请键入以下命令 :
bin/kafka-server-start. sh config/server.properties
启动Kafka Broker后，在ZooKeeper终端上输入命令，您会看到以下响应 :
821 QuorumPeerMain 928 Kafka 931 Jps
现在你可以看到在终端上运行的两个守护进程，其中QuorumPeerMain是ZooKeeper守护进程，另一个是Kafka守护进程.
单节点 - 单一代理配置
在这个配置中你有ingle ZooKeeper和经纪人ID实例.以下是配置它的步骤&减去;
创建Kafka主题 : Kafka提供了一个名为的命令行实用程序，用于在服务器上创建主题.打开新终端并输入以下示例.
语法
bin/kafka-topics.sh --create --zookeeper localhost:2181 --rerelication-factor 1 --partitions 1 - topic topic-name
示例
bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic Hello-Kafka
我们刚刚创建了一个名为具有单个分区和一个副本因子.上面创建的输出将类似于以下输出 :
输出 : 创建主题
创建主题后，您可以在Kafka代理终端窗口中获取通知，并在"/tmp/kafka-logs/"在config/server.properties文件中.
主题列表
获取Kafka中的主题列表服务器，您可以使用以下命令 :
语法
bin/kafka-topics.sh --list --zookeeper localhost:2181
输出
Hello-Kafka
由于我们创建了一个主题，它将列出.假设，如果您创建了多个主题，您将在输出中获得主题名称.
启动生产者发送消息
语法
bin/kafka-console-producer.sh --broker-list localhost:9092 - topic topic-name
从上面的语法中，生产者命令行客户端需要两个主要参数 :
经纪人-list : 我们要将消息发送到的代理列表.在这种情况下，我们只有一个经纪人. Config/server.properties文件包含代理端口ID，因为我们知道我们的代理正在侦听端口9092，因此您可以直接指定它.
主题名称和减号;以下是主题名称的示例.
示例
bin/kafka-console-producer.sh --broker-list localhost:9092 --topic Hello-Kafka
生产者将等待stdin的输入并发布到卡夫卡集群.默认情况下，每个新行都作为新消息发布，然后在文件中指定缺省生成器属性.现在您可以在终端中键入几行消息，如下所示.
输出
$ bin/kafka-console-producer.sh --broker-list localhost:9092 --topic Hello-Kafka[2016-01-16 13:50:45,931] WARN property topic is not valid (kafka.utils.Verifia-bleProperties)HelloMy first message
My second message
启动消费者接收消息
与生产者类似，默认的消费者属性在文件中指定.打开一个新终端并输入以下语法来消费消息.
语法
bin/kafka-console-consumer.sh --zookeeper localhost:2181 -topic topic-name --from-beginning
示例
bin/kafka-console-consumer.sh --zookeeper localhost:2181 —topic Hello-Kafka --from-beginning
输出
HelloMy first messageMy second message
最后，你可以从生产者的终端输入消息并看到它们出现在消费者的终端中.截至目前，您对具有单个代理的单节点集群有很好的理解.现在让我们继续讨论多个代理配置.
单节点多个代理配置
在继续进行多个代理群集设置之前，先进行启动ZooKeeper服务器.
创建多个Kafka Brokers : 我们在con-fig/server.properties中已经有一个Kafka代理实例.现在我们需要多个代理实例，因此将现有的server.prop-erties文件复制到两个新的配置文件中，并将其重命名为server-one.properties和server-two.prop-erties.然后编辑两个新文件并分配以下更改和减号;
config/server-one.properties
# The id of the broker. This must be set to a unique integer for each broker.broker.id=1# The port the socket server listens onport=9093# A comma seperated list of directories under which to store log fileslog.dirs=/tmp/kafka-logs-1
config/server-two.properties
# The id of the broker. This must be set to a unique integer for each broker.broker.id=2# The port the socket server listens onport=9094# A comma seperated list of directories under which to store log fileslog.dirs=/tmp/kafka-logs-2
启动多个经纪人 : 在三台服务器上进行了所有更改后，再打开三个新终端，逐个启动每个代理.
Broker1bin/kafka-server-start.sh config/server.propertiesBroker2bin/kafka-server-start.sh config/server-one.propertiesBroker3bin/kafka-server-start.sh config/server-two.properties
现在我们在机器上运行了三个不同的代理.通过在ZooKeeper终端上键入 jps 来自行尝试检查所有守护进程，然后您将看到响应.
创建主题
让我们为本主题分配复制因子值为3，因为我们有三个不同的代理运行.如果您有两个代理，则分配的副本值将为两个.
语法
bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 3 -partitions 1 --topic topic-name
示例
bin/kafka-topics.sh --create --zookeeper localhost:2181 --rerelication-factor 3 -partitions 1 --topic Multibrokerapplication
输出
created topic "Multibrokerapplication"
命令用于检查哪个经纪人正在监听当前创建的主题，如下所示 :
bin/kafka-topics.sh --describe - -zookeeper localhost:2181 - topic Multibrokerappli-cation
输出
bin/kafka-topics.sh --describe --zookeeper localhost:2181 --topic Multibrokerappli-cationTopic:Multibrokerapplication PartitionCount:1 ReplicationFactor:3 Configs: Topic:Multibrokerapplication Partition:0 Leader:0 Replicas:0,2,1 Isr:0,2,1
从上面的输出，我们可以得出结论，第一行给出了所有分区的摘要，显示了主题名称，分区计数和我们已经选择的复制因子.在第二行中，每个节点将成为随机选择的分区部分的领导者.
在我们的例子中，我们看到我们的第一个代理(使用broker.id 0)是领导.然后复制品:0,2,1表示所有代理最终复制主题是复制品的集合.好吧，这是当前活着并被领导者抓住的副本子集.
启动生产者发送消息
此过程仍然是与单个经纪人设置相同.
示例
bin/kafka-console-producer.sh --broker-list localhost:9092 --topic Multibrokerapplication
输出
bin/kafka-console-producer.sh --broker-list localhost:9092 --topic Multibrokerapplication[2016-01-20 19:27:21,045] WARN Property topic is not valid (kafka.utils.Verifia-bleProperties)This is single node-multi broker demoThis is the second message
启动消费者接收消息
此过程与单个代理设置中显示的相同.
示例
bin/kafka-console-consumer.sh --zookeeper localh ost:2181 -topic Multibroke -pplica- tion - from-beginning
输出
bin/kafka-console-consumer.sh --zookeeper localhost:2181 —topic Multibrokerapplica-tion —from-beginningThis is single node-multi broker demoThis is the second message
基本主题操作
在本章中，我们将讨论各种基本主题操作.
修改主题
您已经了解了如何在Kafka Cluster中创建主题.现在让我们使用以下命令修改创建的主题
语法
bin/kafka-topics.sh -zookeeper localhost:2181 --alter --topic topic_name --partions-tions count
示例
We have already created a topic "Hello-Kafka" with single partition count and one replica factor. Now using "alter" command we have changed the partition count.bin/kafka-topics.sh --zookeeper localhost:2181 --alter --topic Hello-kafka --parti-tions 2
输出
WARNING: If partitions are increased for a topic that has a key, the partition logic or ordering of the messages will be affectedAdding partitions succeeded!
删除主题
要删除主题，您可以使用以下语法.
语法
bin/kafka-topics.sh --zookeeper localhost:2181 --delete --topic topic_name
示例
bin/kafka-topics.sh --zookeeper localhost:2181 --delete --topic Hello-kafka
输出
> Topic Hello-kafka marked for deletion
注意 : 如果 delete.topic.enable 未设置为true，则不会产生任何影响