概述
您可在运营分析中查看不同空间、场景的运营数据,查询用户和 Cloud Mate 的会话记录。
前提条件
在 Cloud Mate 中已创建 空间。
当前操作账号拥有访问运营数据的权限,可参考 权限管理。
操作步骤
1. 登录 Cloud Mate,在空间列表中选择您有权限的空间,单击空间名称进入。
2. 在左侧选择运营分析,各页签的如下。
空间运营数据
从空间的维度,观察使用排障场景的用户和使用的 token。右上角选择观察的时间范围。
指标/图表 | 统计方法 | 统计维度 | 说明 |
会话个数 | Sum | 空间 | 选择的时间范围内,该空间的用户发起的会话总数。 |
会话趋势 | Sum | 空间、Interval | 选择的时间范围内,会话总数的时序图。 |
活跃用户数 | Sum | 空间 | 选择的时间范围内,该空间的用户总数。 |
用户活跃趋势 | Sum | 空间、Interval | 选择的时间范围内,活跃用户总数的时序图。 |
评价记录 | Sum | 空间、评价(赞、踩) | 选择的时间范围内,评价总数:点赞、点踩的总数。 |
评价记录列表 | - | - | 评价(赞、踩)、用户 ui、会话开始时间、会话 id、场景 id。 |
使用 Token 数量 | Sum | 空间、会话 | 选择时间范围内,对话产生的 Token 总数:输入、输出、思考 Token 的数量。 |
会话记录
查询指定场景、时间范围内发起的所有会话的详情。您可在列表上方选择场景、时间范围进行会话过滤,您也可在列表右上角输入会话 ID 进行搜索。
会话记录字段 | 说明 |
会话 ID | 会话的 ID。 |
会话创建时间 | 会话创建的时间。 |
所属场景 | 会话中用户选择的场景。当用户不选择场景时,显示 '-'。 |
用户 UIN | 发起用户的 UIN。 |
问题描述 | 会话中的用户首次发问的描述。如果有多轮次问答,也只展示第一次。 |
Token 总数 | 用户会话使用的 Token 总数,包括输入、输出、思考 Token 的数量。 |
AI 答复 Latency(毫秒) | 如有多轮次问答,会将所有轮次的 Latency 求和(Sum),单位是毫秒。 |
调用方式 | 机器人(wecombot)、API、控制台(MC、Manage Console)。 |
模型 | DeepSeek-R1、Smart-Model-V1等。 |
消息评价 | 赞或者踩。 |
操作 | 分享本次会话给其它用户。被分享的用户需要对本空间 WorkSpace 有访问权限方可查看该会话。 |
场景运营数据
从场景的维度,观察会话和 Token,在右上角可选择观察的时间范围。
指标/图表 | 统计方法 | 统计维度 | 说明 |
不同场景的会话总数 | Sum | 场景 | 选择的时间范围内,使用该场景发起的会话总数。 |
不同场景的会话个数趋势 | Sum | 场景、Interval | 选择的时间范围内,会话总数的时序图。 |
使用 token 的数量(平均) | Avg | 场景 | 选择的时间范围内(会话创建时间落在您选择的时间范围内),该场景的所有对话使用 token 的平均值。 |
使用 token 的数量(总数) | Sum | 场景 | 选择的时间范围内(会话创建时间落在您选择的时间范围内),使用该场景的所有对话使用 token 的总数。 |
会话耗时 | Avg、P50、P90、P95、P99 | 场景 | 选择的时间范围内,该场景会话的 Latency。 |
会话轮次 | Avg、P50、P90、P95、P99 | 场景 | 选择的时间范围内,该场景会话的轮次,理论上会话轮次越少,代表场景的工作效率越高,否则用户会追问多次,来获取满意的结果。 |