BE 监控指标

最近更新时间:2024-06-04 16:57:21

我的收藏
在 BE 指标页面,可查看 BE 相关的各项指标,详细信息如下表所示。
类别
指标名称
单位
指标英文名
备注
机器监控
BE 存活
-
be_up

BROKER 存活
-
broker_up

CPU 使用率
%
cpu_usage

内存使用率
%
mem_usage

数据盘使用率
%
disk_usage

1分钟负载
-
node_load1

5分钟负载
-
node_load5

15分钟负载
-
node_load15

节点接收流量
Bytes/s
node_network_receive_bytes_total

节点发送流量
Bytes/s
node_network_transmit_bytes_total

磁盘读速度
Count/s
node_disk_reads_completed_total

磁盘写速度
Count/s
node_disk_writes_completed_total

系统盘使用率
%
system_disk_usage

Compaction
BE Base compaction 的数据量
Bytes/s
doris_be_compaction_bytes_total_base

每秒 Cumulative Compaction处理的 rowset 个数
Count/s
doris_be_compaction_deltas_total_cumulative

BE Cumulative compaction 的数据量
Bytes/s
doris_be_compaction_bytes_total_cumulative

每秒 Base Compaction 处理的 rowset 个数
Count/s
doris_be_compaction_deltas_total_base

BE tablet base 最大 compaction 分数
Count
doris_be_tablet_base_max_compaction_score

BE tablet cumulative compaction 最大分数
Count
doris_be_tablet_cumulative_max_compaction_score

Compaction 任务已使用的令牌数量
Count
doris_be_compaction_used_permits

正在等待Compaction令牌的数量
Count
doris_be_compaction_waitting_permits

Load
BE streaming load 现有进程数
Count
doris_be_streaming_load_current_processing

BE streaming load 请求数量
Count/s
doris_be_streaming_load_requests_total

streaming load 持续时间
ms
doris_be_streaming_load_duration_ms

stream load 开始事务数的数量
Count/s
doris_be_stream_load_txn_request_begin

stream load 执行成功的事务数的数量
Count/s
doris_be_stream_load_txn_request_commit

stream load 执行失败的事务数的数量
Count/s
doris_be_stream_load_txn_request_rollback

通过 tablet sink 发送的数量
Bytes/s
doris_be_load_bytes

通过 tablet sink 发送的行数
Count/s
doris_be_load_rows

打开的 load channel 个数
Count
doris_be_load_channel_count

正在执行的 routine load task 个数
Count
doris_be_routine_load_task_count

streaming load Pipe 数量
Count
doris_be_stream_load_pipe_count
1.2之前内核版本支持
Query
BE fragment 的请求时间
μs
doris_be_fragment_request_duration_us

BE plan fragment 数量
Count
doris_be_plan_fragment_count

BE fragment 的请求次数
Count/s
doris_be_fragment_requests_total

BE DataStream 的数量
Count
doris_be_fragment_endpoint_count
1.2之前内核版本支持
当前查询执行线程池等待队列的长度
Count
doris_be_fragment_thread_pool_queue_size

读取行数的数量
Count/s
doris_be_query_scan_rows

读取的 segment 的行数
Count
doris_be_segment_read_segment_row_total

读取的 segment 的个数
Count
doris_be_segment_read_segment_read_total

因超时而被取消的 fragment instance 数量
Count/s
doris_be_timeout_canceled_fragment_count

hdfs file reader 数量
Count
doris_be_hdfs_file_open_reading
2.0后续内核版本支持
其他
BE memory pool 大小
Bytes
doris_be_memory_pool_bytes_total

BE memory allocated 大小
Bytes
doris_be_memory_allocated_bytes

BE 进程使用文件句柄数量
Count
doris_be_process_fd_num_used

BE 进程文件句柄 soft 限制数量
Count
doris_be_process_fd_num_limit_soft

BE 进程文件句柄 hard 限制数量
Count
doris_be_process_fd_num_limit_hard

BE 进程运行的线程个数
Count
doris_be_process_thread_num

BE Broker 使用 thrift 的数量
Count
doris_be_thrift_used_clients_broker

BE 使用 thrift 的数量
Count
doris_be_thrift_used_clients_backend

FE 使用 thrift 的数量
Count
doris_be_thrift_used_clients_frontend

BE 节点汇报的 compaction core
Count
doris_fe_tablet_max_compaction_score

BE 节点当前 tablet 总数
Count
doris_fe_tablet_num

指定数据目录所在磁盘的剩余空间
Bytes
doris_be_disks_avail_capacity_storage

BE 缓存的小文件数量
Count
doris_be_small_file_cache_count

ChunkAllocator 中预留的内存大小
Bytes
doris_be_chunk_pool_reserved_bytes
1.2之前内核版本支持
当前所有 segment 的个数
Count
doris_be_all_segments_num

当前所有 rowset 的个数
Count
doris_be_all_rowsets_num

当前已废弃的rowset的个数
Count
doris_be_unused_rowsets_count

自上次启动后,新增的并且正在使用的 rowset id 个数
Count
doris_be_rowset_count_generated_and_in_use

SegmentMetaCache 容量
Bytes
doris_be_cache_capacity_segment_meta_cache
1.2之前内核版本支持
IndexPageCache 容量
Bytes
doris_be_cache_capacity_index_page_cache
1.2之前内核版本支持
DataPageCache 容量
Bytes
doris_be_cache_capacity_data_page_cache
1.2之前内核版本支持
LastestSuccessChannelCache 容量
Bytes
doris_be_cache_capacity_lastest_success_channel_cache
1.2之前内核版本支持
Tablet调度器所调度的 tablet 数量的累计值
Count
doris_fe_tablet_status_count_total

表示累积的被检查过的不健康的 tablet 数量
Count
doris_fe_tablet_status_count_unhealthy

SegmentMetaCache 使用量
Bytes
doris_be_cache_usage_segment_meta_cache
1.2之前内核版本支持
IndexPageCache 使用量
Bytes
doris_be_cache_usage_index_page_cache
1.2之前内核版本支持
DataPageCache 使用量
Bytes
doris_be_cache_usage_data_page_cache
1.2之前内核版本支持
LastestSuccessChannelCache 使用量
Bytes
doris_be_cache_usage_lastest_success_channel_cache
1.2之前内核版本支持
DeleteBitmap AggCache 使用量
Bytes
doris_be_cache_usage_deletebitmap_aggcache
1.2之前内核版本支持
SegmentMetaCache 使用率
%
doris_be_cache_usage_ratio_segment_meta_cache
1.2之前内核版本支持
IndexPageCache 使用率
%
doris_be_cache_usage_ratio_index_page_cache
1.2之前内核版本支持
DataPageCache 使用率
%
doris_be_cache_usage_ratio_data_page_cache
1.2之前内核版本支持
LastestSuccessChannelCache 使用率
%
doris_be_cache_usage_ratio_lastest_success_channel_cache
1.2之前内核版本支持
DeleteBitmap AggCache 使用率
%
doris_be_cache_usage_ratio_deletebitmap_aggcache
1.2之前内核版本支持
DeleteBitmap AggCache 容量
Bytes
doris_be_cache_capacity_deletebitmap_aggcache
1.2之前内核版本支持
回收站中的文件容量大小
Bytes
doris_be_disks_trash_used_capacity
2.0后续内核版本支持
tablet_schema_cache 使用内存大小
Bytes
doris_be_tablet_schema_cache_memory_bytes
2.0后续内核版本支持
tablet_schema_cache 使用数量
Count
doris_be_tablet_schema_cache_count
2.0后续内核版本支持
SchemaCache 使用量
Bytes
doris_be_cache_usage_schema_cache
2.0后续内核版本支持
RowCache 使用量
Bytes
doris_be_cache_usage_row_cache
2.0后续内核版本支持
PKIndexPageCache 使用量
Bytes
doris_be_cache_usage_pk_index_page_cache
2.0后续内核版本支持
TabletVersionCache 使用量
Bytes
doris_be_cache_usage_tablet_version_cache
2.0后续内核版本支持
SegmentCache 使用量
Bytes
doris_be_cache_usage_segment_cache
2.0后续内核版本支持
SchemaCache 使用率
%
doris_be_cache_usage_ratio_schema_cache
2.0后续内核版本支持
RowCache 使用率
%
doris_be_cache_usage_ratio_row_cache
2.0后续内核版本支持
PKIndexPageCache 使用率
%
doris_be_cache_usage_ratio_pk_index_page_cache
2.0后续内核版本支持
TabletVersionCache 使用率
%
doris_be_cache_usage_ratio_tablet_version_cache
2.0后续内核版本支持
SegmentCache 使用率
%
doris_be_cache_usage_ratio_segment_cache
2.0后续内核版本支持