Kafka监控Eagle

Kafka-Eagle框架能够监控Kafka集群的整体运行,常用于消费场所。

一、MySQL情境筹办

Kafka-Eagle的设备从属于MySQL,次要用于存储视觉数据。若是之前集群中已经安拆了MySQL,那一步就能够跨了。

二,卡夫卡情境的筹办

1)封闭Kafka集群

[duo@hadoop01 kafka]$ kf.sh stop

2)修改/opt/data/Kafka/bin/Kafka-server-start . sh挨次

[duo@hadoop01 kafka]$ vim bin/kafka-server-start.sh

更正以下参数值:

if [ "x$KAFKA_HEAP_OPTS" = "x" ]; then export KAFKA_HEAP_OPTS="-Xmx1G -Xms1G"fiif [ "x$KAFKA_HEAP_OPTS" = "x" ]; then export KAFKA_HEAP_OPTS="-server -Xms2G -Xmx2G -XX:PermSize=128m -XX:+UseG1GC -XX:MaxGCPauseMillis=200 -XX:ParallelGCThreads=8 -XX:ConcGCThreads=5 -XX:InitiatingHeapOccupancyPercent=70" export JMX_PORT="9999" #export KAFKA_HEAP_OPTS="-Xmx1G -Xms1G"fi

留意:在Kafka之前要分发的剩余节点在更正后正在启动

[duo@hadoop01 bin]$ xsync kafka-server-start.sh三。卡夫卡-鹰安装

Https://www.kafka-eagle.org/,官方网站

(1)将压缩包kafka-eagle-bin-2.0.8.tar.gz上传到集群。

(2)解压到当地

[duo@hadoop01 software]$ tar -zxvf kafka-eagle-bin-2.0.8.tar.gz

(3)将efak-web-2.0.8-bin.tar.gz解压缩到/opt/data

[duo@hadoop01 kafka-eagle-bin-2.0.8]$ tar -zxvf efak-web-2.0.8-bin.tar.gz -C /opt/data/

(4)修改并设置设备显示文档system-config.properties

[duo@hadoop01 conf]$ vim system-config.properties####################################### multi zookeeper & kafka cluster list# Settings prefixed with 'kafka.eagle.' will be deprecated, use 'efak.' instead######################################efak.zk.cluster.alias=cluster1cluster1.zk.list=hadoop01:2181,hadoop02:2181,hadoop03:2181/kafka# EFAK webui port######################################efak.webui.port=8048# 设置配备安排mysql跟尾efak.driver=com.mysql.jdbc.Driverefak.url=jdbc:mysql://hadoop01:3306/ke?useUnicode=true&characterEncoding=UTF-8&zeroDateTimeBehavior=convertToNullefak.username=rootefak.password=000000

Kafka监控Eagle_mysql

Kafka监控Eagle_kafka_02

(5)增加情境变量。

# kafkaEFAKexport KE_HOME=/opt/data/efak-web-2.0.8export PATH=$PATH:$KE_HOME/bin

留意:source /etc/profile

[duo@hadoop01 conf]$ source /etc/profile

(6)起头

留意:ZK和卡夫卡应该在起头之前起头。

Kafka监控Eagle_kafka_03

激活efak

[duo@hadoop01 efak]$ bin/ke.sh startWelcome to ______ ______ ___ __ __ / ____/ / ____/ / | / //_/ / __/ / /_ / /| | / ,< / /___ / __/ / ___ | / /| |/_____/ /_/ /_/ |_|/_/ |_|( Eagle For Apache Kafka® )Version 2.0.8 -- Copyright 2016-2021******************************************************************** EFAK Service has started success.* Welcome, Now you can visit 'http://192.168.88.111:8048'* Account:admin ,Password:123456******************************************************************** <Usage> ke.sh [start|status|stop|restart|stats] </Usage>* <Usage> https://www.kafka-eagle.org/ </Usage>*******************************************************************

廓清:若是efak暂停,施行订单。

[duo@hadoop01 efak]$ bin/ke.sh stop

Kafka监控Eagle_mysql_04

四。卡夫卡-老鹰页面操做

(1)在登录页面 查看监测数据http://192.168.88.111: 8048/

(2)登录

Kafka监控Eagle_kafka_05

(3)主页

Kafka监控Eagle_kafka_06

(4)经纪人

Kafka监控Eagle_mysql_07

(5)话题

Kafka监控Eagle_mysql_08

6)监控

Kafka监控Eagle_hadoop_09

Kafka监控Eagle_mysql_10

您可以还会对下面的文章感兴趣:

最新评论

◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。