可视化和管理解决方案
可视化和管理解决方案  /  监控 Kafka
Kafka logo

使用 Grafana 轻松监控 Kafka

使用 Grafana Cloud 的开箱即用监控解决方案轻松监控您安装的 Kafka(流行的开源分布式事件流平台)。Grafana Cloud 永久免费层包括 3 个用户和多达 10k 个指标系列,以满足您的监控需求。

Kafka overview dashboard
Kafka 概述仪表板
Kafka topics dashboard
Kafka 主题仪表板
Kafka Connect Overview dashboard
Kafka Connect 概述仪表板
Kafka KSQL Overview dashboard
Kafka KSQL 概述仪表板
Schema Registry Overview dashboard
模式注册表概述仪表板
Kafka ZooKeeper dashboard
Kafka ZooKeeper 仪表板

包含的关键指标

avg_latency
java_lang_classloading_loadedclasscount
java_lang_memory_heapmemoryusage_committed
java_lang_memory_heapmemoryusage_max
java_lang_memory_heapmemoryusage_used
java_lang_memory_nonheapmemoryusage_committed
java_lang_memory_nonheapmemoryusage_max
java_lang_memory_nonheapmemoryusage_used
java_lang_operatingsystem_cpuload
java语言运行环境操作系统进程CPU时间
java语言运行环境系统负载平均值
java语言运行环境启动时间
java语言运行环境运行时间
java语言多线程守护线程数量
java语言多线程峰值线程数量
java语言多线程线程数量
JVM缓冲池容量字节数
JVM缓冲池使用字节数
JVM已加载类的数量
JVM垃圾回收秒数计数
JVM垃圾回收秒数总和
JVM提交内存字节数
JVM内存最大字节数
JVM已使用内存字节数
JVM已提交字节数
JVM最大字节数
JVM内存池分配字节数总计
JVM内存池提交字节数
JVM内存池最大字节数
JVM内存池已使用字节数
JVM已使用内存字节数
JVM当前线程数
JVM守护线程数
JVM死锁线程数
JVM峰值线程数
JVM线程状态
Kafka集群分区未最小副本分配
Kafka集群分区未复制
Kafka连接应用信息
Kafka连接连接指标连接数
Kafka连接连接指标失败认证总数
Kafka连接连接指标入字节率
Kafka连接连接指标I/O比率
Kafka连接连接指标网络I/O速率
Kafka连接连接指标出字节率
Kafka连接连接指标请求率
Kafka连接连接指标响应率
Kafka连接连接指标成功认证率
Kafka连接连接工作指标连接器数量
Kafka连接连接工作指标连接器销毁任务数量
Kafka连接连接工作指标连接器失败任务数量
Kafka连接连接工作指标连接器暂停任务数量
Kafka连接连接工作指标连接器运行任务数量
Kafka连接连接工作指标连接器启动失败总数
Kafka连接连接工作指标连接器启动成功总数
Kafka连接连接工作指标连接器任务总数
Kafka连接连接工作指标连接器未分配任务数量
Kafka连接连接工作指标任务数量
Kafka连接连接工作指标任务启动失败总数
Kafka连接连接工作指标任务启动成功总数
Kafka连接连接工作重新平衡指标重新平衡平均毫秒数
Kafka连接连接工作重新平衡指标自上次重新平衡以来时间毫秒数
Kafka连接连接器信息
Kafka连接连接指标
Kafka连接连接任务指标批次大小平均值
Kafka连接连接任务指标批次大小最大值
Kafka连接连接任务指标偏移量提交平均时间毫秒数
Kafka连接连接任务指标偏移量提交成功百分比
Kafka连接连接任务指标暂停比率
Kafka连接连接任务指标运行比率
Kafka连接下游任务指标分区计数
Kafka连接下游任务指标入批平均时间毫秒数
Kafka连接下游任务指标入批最大时间毫秒数
Kafka连接上游任务指标轮询批平均时间毫秒数
Kafka连接上游任务指标轮询批最大时间毫秒数
Kafka连接上游任务指标活动源记录平均值
Kafka连接上游任务指标活动源记录最大值
Kafka连接上游任务指标源记录轮询率
Kafka连接上游任务指标源记录写入率
Kafka连接任务错误指标死信队列生产请求
Kafka连接任务错误指标记录错误总数
Kafka连接任务错误指标记录错误总数
Kafka连接任务错误指标记录失败总数
Kafka连接任务错误指标跳过的记录总数
Kafka连接任务错误指标重试总数
Kafka消费者延迟毫秒数
Kafka消费群组当前偏移量
Kafka消费群组延迟
Kafka消费群组未提交偏移量
Kafka控制器控制器统计不干净领导选举总数
Kafka控制器控制器统计每秒不干净领导选举总数
Kafka控制器Kafka控制器活动控制器计数
Kafka控制器Kafka控制器活动控制器计数值
Kafka控制器Kafka控制器离线分区计数
Kafka控制器Kafka控制器离线分区计数值
Kafka控制器Kafka控制器首选副本不平衡计数
Kafka控制器Kafka控制器首选副本不平衡计数值
Kafka日志日志日志末偏移量
Kafka日志日志日志起始偏移量
Kafka日志日志大小
Kafka网络请求指标本地时间毫秒
Kafka网络请求指标本地时间毫秒计数
Kafka网络请求指标远程时间毫秒
Kafka网络请求指标远程时间毫秒计数
Kafka网络请求指标请求队列时间毫秒
Kafka网络请求指标请求队列时间毫秒计数
Kafka网络请求指标响应队列时间毫秒
Kafka网络请求指标响应队列时间毫秒计数
Kafka网络请求指标响应发送时间毫秒
Kafka网络请求指标响应发送时间毫秒计数
Kafka模式注册Jersey指标请求延迟99
Kafka模式注册Jersey指标请求速率
Kafka模式注册Jetty指标活动连接
Kafka模式注册已注册模式数量
Kafka模式注册创建模式数量
Kafka服务器代理主题指标总字节数
Kafka服务器代理主题指标每秒入字节数
Kafka服务器代理主题指标每秒入字节数计数
Kafka服务器代理主题指标总出字节数
Kafka服务器代理主题指标每秒出字节数
Kafka服务器代理主题指标每秒出字节数计数
Kafka服务器代理主题指标获取消息转换总数
Kafka服务器代理主题指标获取消息转换每秒
Kafka服务器代理主题指标获取消息转换每秒计数
服务器端Kafka代理主题指标_消息总数
服务器端Kafka代理主题指标_每秒消息数
服务器端Kafka代理主题指标_每秒消息数_计数
服务器端Kafka代理指标_生产消息转换总数
服务器端Kafka代理指标_每秒生产消息转换数
服务器端Kafka代理指标_每秒生产消息转换数_计数
服务器端Kafka服务器_代理状态
服务器端Kafka服务器_总计_代理状态值
服务器端副本管理_是否扩展总数
服务器端副本管理_每秒是否扩展
服务器端副本管理_每秒收缩总数
服务器端副本管理_每秒收缩
服务器端副本管理_分区计数
服务器端副本管理_总计_每秒是否扩展计数
服务器端副本管理_总计_每秒收缩计数
服务器端副本管理_总计_分区计数值
服务器端会话过期监听器_Zookeeper身份验证失败总数
服务器端会话过期监听器_Zookeeper身份验证失败每秒
服务器端会话过期监听器_Zookeeper断开连接总数
服务器端会话过期监听器_Zookeeper断开连接每秒
服务器端会话过期监听器_Zookeeper过期总数
服务器端会话过期监听器_Zookeeper过期每秒
服务器端会话过期监听器_Zookeeper同步连接总数
服务器端会话过期监听器_Zookeeper同步连接每秒
服务器端Zookeeper客户端指标_Zookeeper请求延迟(毫秒)
服务器端Zookeeper客户端指标_Zookeeper请求延迟(毫秒)_计数
服务器端流状态指标_删除延迟平均
服务器端流状态指标_删除延迟最大
服务器端流状态指标_删除速率
服务器端流状态指标_抓取延迟平均
服务器端流状态指标_抓取速率
服务器端流状态指标_如果不存在则插入延迟平均
服务器端流状态指标_如果不存在则插入延迟最大
服务器端流状态指标_如果不存在则插入速率
服务器端流状态指标_插入延迟平均
服务器端流状态指标_插入延迟最大
服务器端流状态指标_插入速率
服务器端流状态指标_恢复延迟平均
服务器端流状态指标_恢复延迟最大
服务器端流状态指标_恢复速率
服务器端流线程指标_提交延迟平均
服务器端流线程指标_提交延迟最大
服务器端流线程指标_轮询延迟平均
服务器端流线程指标_轮询延迟最大
服务器端流线程指标_处理延迟平均
服务器端流线程指标_处理延迟最大
服务器端流线程指标_打点延迟平均
服务器端流线程指标_打点延迟最大
主题分区当前偏移量
ksql_ksql_engine_query_stats_error_queries
ksql_ksql_engine_query_stats_liveness_indicator
ksql_ksql_engine_query_stats_messages_consumed_per_sec
ksql_ksql_engine_query_stats_messages_produced_per_sec
ksql_ksql_engine_query_stats_not_running_queries
ksql_ksql_engine_query_stats_num_active_queries
ksql_ksql_engine_query_stats_num_idle_queries
ksql_ksql_engine_query_stats_num_persistent_queries
ksql_ksql_engine_query_stats_pending_shutdown_queries
ksql_ksql_engine_query_stats_rebalancing_queries
ksql_ksql_engine_query_stats_running_queries
ksql_ksql_metrics_ksql_queries_query_status
最大延迟
最小延迟
活动连接数
待处理请求
进程CPU秒数总计
进程最大文件描述符数
进程打开文件描述符数
进程驻留内存字节数
进程启动时间(秒)
法定多数大小
开启
监视计数
znode计数
Zookeeper平均请求延迟
Zookeeper内存数据树节点计数
Zookeeper内存数据树监视计数
Zookeeper最大请求延迟
Zookeeper最小请求延迟
Zookeeper活动连接数
Zookeeper待处理请求
Zookeeper状态_法定多数大小
Zookeeper心跳时间

包含关键警报规则

KafkaBrokerCount(临界)
KafkaISRExpandRate(警告)
KafkaISRShrinkRate(警告)
KafkaLagIsTooHigh(临界)
KafkaLagKeepsIncreasing(警告)
KafkaNoActiveController(临界)
KafkaOfflinePartitonCount(临界)
KafkaUncleanLeaderElection(临界)
KafkaUnderReplicatedPartitionCount(临界)
KafkaZookeeperSyncConnect(临界)
Java内存填充(警告)
JvmThreadsDeadlocked(临界)
Java内存填充(警告)
JvmThreadsDeadlocked(临界)