Impala 监控指标

最近更新时间:2024-02-02 14:31:01

我的收藏
注意
Impala 指标目前仅支持 Impala3.4.0 及以上版本。

Impala-CATALOG

标题
指标名称
指标单位
指标含义
常驻内存集
RSS
bytes
常驻内存集
JVM 内存
MemHeapInitM
MB
JVM 初始 HeapMemory 的数量峰值
MemHeapCommittedM
MB
JVM 当前已经提交的 HeapMemory 的数量
MemHeapMaxM
MB
JVM 配置的 HeapMemory 的数量
MemHeapUsedM
MB
JVM 当前已经使用的 HeapMemory 的数量
MemNonHeapInitM
MB
JVM 初始 NonHeapMemory的数量
MemNonHeapCommittedM
MB
JVM 当前已经提交的 NonHeapMemory 的数量
MemNonHeapUsedM
MB
JVM 当前已经使用的 NonHeapMemory 的数量
堆内存使率
MemHeapUsedRate
%
JVM 当前已经使用的 HeapMemory 的数量所占 JVM 配置的 HeapMemory 的数量的百分比
守护进程到 StateStore 的心跳间隔
Last
s
守护进程到 StateStore 的最近心跳间隔
Max
s
守护进程到 StateStore 的最大心跳间隔
Mean
s
守护进程到 StateStore 的平均心跳间隔
Min
s
守护进程到 StateStore 的最小心跳间隔
Stddev
s
守护进程到 StateStore 的心跳之间的标准偏差
TCMALLOC 内存
Used
bytes
程序使用的字节数
PageheapFreeBytes
bytes
页堆中空闲映射页的字节数
PageheapUnmappedBytes
bytes
页堆中空闲、未映射页的字节数
PhysicalBytesReserved
bytes
计算进程使用的物理内存量
TotalBytesReserved
bytes
TCMalloc 保留的系统内存字节数
活跃连接数
Thrift_Server_Connections_Used
活跃连接数
进程运行时间
Uptime
s
进程运行时间
文件描述符数
MaxFileDescriptorCount
最大文件描述符数
OpenFileDescriptorCount
已打开文件描述符数
线程数
ThreadCount
总线程数量
DaemonThreadCount
Daemon 线程数
CPU 利用率
SystemCpuLoad
系统 CPU 利用率

Impala-STATESTORE

标题
指标名称
指标单位
指标含义
常驻内存集
RSS
bytes
常驻内存集
TCMALLOC 内存
Used
bytes
程序使用的字节数
PageheapFreeBytes
bytes
页堆中空闲映射页的字节数
PageheapUnmappedBytes
bytes
页堆中空闲、未映射页的字节数
PhysicalBytesReserved
bytes
计算进程使用的物理内存量
TotalBytesReserved
bytes
TCMalloc 保留的系统内存字节数
连接数
Used
活跃连接数
运行线程数
Count
运行线程数
StateStore 订阅者数量
Count
StateStore 订阅者数量

Impala-DAEMON

标题
指标名称
指标单位
指标含义
JVM 内存
MemHeapInitM
MB
JVM 初始 HeapMemory 的数量峰值
MemHeapCommittedM
MB
JVM 当前已经提交的 HeapMemory 的数量
MemHeapMaxM
MB
JVM 配置的 HeapMemory 的数量
MemHeapUsedM
MB
JVM 当前已经使用的 HeapMemory 的数量
MemNonHeapInitM
MB
JVM 初始 NonHeapMemory的数量
MemNonHeapCommittedM
MB
JVM 当前已经提交的 NonHeapMemory 的数量
MemNonHeapUsedM
MB
JVM 当前已经使用的 NonHeapMemory 的数量
堆内存使率
MemHeapUsedRate
%
JVM 当前已经使用的 HeapMemory 的数量所占 JVM 配置的 HeapMemory 的数量的百分比
TCMALLOC 内存
Used
bytes
程序使用的字节数
PageheapFreeBytes
bytes
页堆中空闲映射页的字节数
PageheapUnmappedBytes
bytes
页堆中空闲、未映射页的字节数
PhysicalBytesReserved
bytes
计算进程使用的物理内存量
TotalBytesReserved
bytes
TCMalloc 保留的系统内存字节数
线程数
ThreadCount
总线程数量
DaemonThreadCount
Daemon 线程数
进程运行时间
Uptime
s
进程运行时间
文件描述符数
MaxFileDescriptorCount
最大文件描述符数
OpenFileDescriptorCount
已打开文件描述符数
CPU 利用率
SystemCpuLoad
系统 CPU 利用率
Beeswax API 客户端连接数
Use
活跃 Beeswax API 连接数
Conn_In_Use
与此 Impala Daemon 的活跃 Beeswax API 连接数
TotalConns
与此 Impala Daemon 的活跃 Beeswax API 连接总数
ConnSetupQueueSize
此 Impala Daemon 已被接收并等待建立连接的 Beeswax API 连接数
HS2 API 客户端连接数
Use
活跃 HS2 API 连接数
Conn_In_Use
活跃 HS2 API 连接数
TotalConns
此 Impala Daemon 在生命周期内建立连接的 HS2 API 连接总数
ConnSetupQueueSize
此 Impala Daemon 已被接收并等待建立连接的 HS2 API 连接数
线程管理器
RunningThreads
运行线程数
TotalCreatedThreads
生命周期内创建的线程数
内存管理器限制
Limit
Bytes
超过其内存限制的内存量(默认值-1)
超过其内存限制的内存量(默认值-1)
OverLimit
Bytes
生命周期内创建的线程数
HS2 API 客户端等待建立连接时间
P20
us
HS2 API 客户端等待建立连接时间
P50
P70
P90
P95
P99.9
Beeswax API 客户端等待服务线程建立时间
P20
us
Beeswax API 客户端等待服务线程建立时间
P50
P70
P90
P95
P99.9
已超时的 Beeswax API 连接数
TimeOutCnncRequests
已超时的 Beeswax API 连接数
解析请求池请求所花费时间(毫秒)
Total
ms
解析请求池请求所花费时间(毫秒)
外部数据源缓存类中缓存未命中数
Misses
外部数据源缓存类中缓存未命中数
已超时等待设置的 Impala 后端服务器的连接请求数
ConnSetupQueueSize
已超时等待设置的 Impala 后端服务器的连接请求数
已超时等待设置的 Impala be 的连接请求数
TimeOutCnncRequests
已超时等待设置的 Impala be 的连接请求数
与此 Impala 守护程序建立的 Impala 后端客户端连接总数
TotalConnections
与此 Impala 守护程序建立的 Impala 后端客户端连接总数
Impala be 的客户端等待连接建立所花费的时间
P20
us
Impala be 的客户端等待连接建立所花费的时间
P50
P70
P90
P95
P99.9
Count
Sum
Impala be 的客户端等待服务线程所花费的时间
P20
us
Impala be 的客户端等待服务线程所花费的时间
P50
P70
P90
P95
P99.9
Count
Sum
HS2 API 客户端等待服务线程建立时间
P20
us
HS2 API 客户端等待服务线程建立时间
P50
P70
P90
P95
P99.9
Count
Sum
HS2 HTTP API 客户端等待服务线程时间
P20
us
HS2 HTTP API 客户端等待服务线程时间
P50
P70
P90
P95
P99.9
Count
Sum
DataStreamService:服务队列溢被拒绝数
RpcsQueueOverflow
DataStreamService:服务队列溢被拒绝数
ControlStreamService:服务队列溢被拒绝数
RpcsQueueOverflow
ControlStreamService:服务队列溢被拒绝数
DataStreamService:使用字节数
PeakUsageBytes
Bytes
Memtracker DataStreamService 峰值使用字节数
CurrentUsageBytes
Bytes
Memtracker DataStreamService 当前使用字节数
ControlService:使用字节数
PeakUsageBytes
Bytes
Memtracker ControlService 峰值使用字节数
CurrentUsageBytes
Bytes
Memtracker ControlService 当前使用字节数
此进程的驻留集大小(RSS)
RSS
Bytes
此进程的驻留集大小(RSS)
StateStore 中注册后端总数
Total
StateStore 中注册后端总数
查询延迟分布
P20
us
查询延迟分布
P50
P70
P90
P95
P99.9
Count
Sum
打开已进行写入 HDFS 文件数
NumFilesOpenForInsert
打开 HDFS 文件数
进程生命周期内读取的扫描范围
ScanRangesTotal
进程生命周期内读取扫描范围
打开 Beeswax 会话数量
NumOpenBeeswaxSessions
打开 Beeswax 会话数量
进程生命周期内处理查询 fragment 总数
NumFragments
进程生命周期内处理查询 fragment 总数
在无 volum 元数据的进程生命周期内读取的扫描范围总数
ScanRangesNumMissingVolumId
在无 volum 元数据的进程生命周期内读取的扫描范围总数
Hedged reads 尝试次数
HedgedReadOps
Hedged reads 尝试次数
在进程生命周期内处理查询总数
NumQueries
在进程生命周期内处理查询总数
支持缓存 HS2 FETCH_FIRST 的总行数
ResultSetCacheTotalNumRows
缓存已支持 HS2 FETCH_FIRST 总行数
此 Impala 服务器上注册的查询总数
NumQueriesRegistered
此 Impala 服务器上注册查询总数
be 查询总数
NumQueriesExecuted
be 查询总数
非活动状态而终止会话数
NumSessionsExpired
非活动状态而终止会话数
非活动状态而终止查询数
NumQueriesExpired
非活动状态而终止查询数
打开 HS2会话数
NumOpenHS2Sessions
打开 HS2会话数
Catalog 里面表数量
NumTables
Catalog tables 数量
Catalog 里面数据库数量
NumDatabases
Catalog Databases 数量
IO 管理器写入磁盘的字节数
BytesWritten
IO 管理器写入磁盘的字节数
IO 管理器打开的文件数
NumOpenFiles
IO 管理器打开的文件数
使用的 HDFS 文件句柄数
NumFileHandlesOutstanding
Bytes
使用的 HDFS 文件句柄数
读取的本地字节数
LocalBytesRead
Bytes
IO 管理器读取的本地字节数
be 查询速率
RateQueriesExecuted
count/s
be 执行的查询速率
处理查询速率
RateQuery
count/s
处理的查询速率
处理查询 fragment 速率
RateFragments
count/s
处理的查询 fragment 速率