weixin_60092693的博客

ZOOKEEPER-kafka Zookeeper是一个开源的分布式应用程序协调服务，是用来保证数据在集群间的事务一致性。 Zookeeper应用场景： 集群分布式锁，集群统一命名服务，分布式协调服务 Zookeeper角色与特性 Leader: 接受所有Follower的提案请求并统一协调发起提案的投票，负责与所有的Follower进行内部数据交换 Follower: 直接为客户端服务并参与提案的投票，同时与Leader 进行数据交换 Observer： 直接为客户端服务但并不参与提案的投票，同时也与Le

zk-kafka zk搭建 [root@node1 ~]# cat /etc/hosts 192.168.1.11 node1 192.168.1.12 node2 192.168.1.13 node3 [root@node1 ~]# ln -sf /usr/share/zoneinfo/Asia/Shanghai /etc/localtime [root@node1 ~]# ntpdate cn.pool.ntp.org [root@node1 ~]# for i in node2 node3;do s

Kafka 监控 [root@node6 ~]# /opt/zookeeper/bin/zk [root@node6 ~]# /opt/kafka/bin/kafka-server-start.sh -daemon /opt/kafka/config/server.properties [root@node6 ~]# jps 1571 Kafka //节点上都需要启动，都要有 [root@node6 ~]# /opt/kafka/bin/kafka-server-stop.sh //停掉kafk

Kafka 事务 Kafka 事务 Kafka 从 0.11 版本开始引入了事务支持。事务可以保证 Kafka 在 Exactly Once 语义的基础上，生产和消费可以跨分区和会话，要么全部成功，要么全部失败。 Producer 事务 为了实现跨分区跨会话的事务，需要引入一个全局唯一的Transaction ID，并将Producer获得的PID 和Transaction ID 绑定。这样当Producer 重启后就可以通过正在进行的 TransactionID 获得原来的PID。 为了管理Transac