运行管理

操作状态: 已降级

测试完成但发现不一致

成功 1000000 · 失败 0 · 中断 0 · 平均完成 RPS 166.25714760259686/500 · TPM 122859393.4 · 总 token 1103807442 · Token 差异 0 · 未匹配请求 0 · 用量缺失 0 · 成功请求仅保留聚合 · 通过 · 证据完整 · 热路径已观测

运行配置

本机自测会切到定量运行:50 RPS、50 个请求、100 最大在途,用于本地冒烟验证。

已从后台恢复运行配置草稿

目标地址

本平台向这个地址发起测试请求;自测时可填本平台 /mock 地址。

默认由当前平台地址自动推导。

保存运行证据、摘要和不一致样本。

用例来源

synthetic 按协议生成;sample_file 直接回放。

仅 sample_file 模式使用;填写 repo-safe JSONL 路径。

认证

用于调用被测实例;不会发送给模拟模型服务或真实模型厂商。

例如 Bearer。

负载参数

每秒计划发起的请求数。

同时未完成的被测请求上限。

每个 pool 可同时占用的连接数。

总容量 ≈ size × count。

停止条件。

sample_file 模式下会读取并循环整个样本文件;这里的用例池大小不会限制样本取样。

仅定量运行使用。

仅定时运行使用。

sample_file 模式下按样本内置延迟回放;这里的延迟分布不会影响实际响应时间。

Workload Slice 维度

流式维度
请求形态维度

预计 workload slice 数:12。实际展示键为 protocol × stream_mode × request_shape。

用例来源:样本文件回放(循环整个文件) · 停止条件:达到 1000000 个请求后收尾

容量预估

当前配置同时满足 max_in_flight 与 Finch 连接池容量。

估算延迟
0 ms
估算在途
0
max_in_flight
500
Finch 总容量
5000 (1250 × 4)
可撑 RPS
≈ 0

Kafka / Event Hubs 对账

启用后填写 Azure Event Hubs 兼容连接串;会自动推导 broker host、TLS 和 SASL/PLAIN 用户名。

默认使用 target 当前产出的成功事件 topic。

留空时按 Event Hubs namespace 推导稳定默认值。

留空时按 Event Hubs namespace 推导稳定默认值。

默认 latest;要回放保留期内旧消息时,临时改为 earliest 并使用新的 group id。

Kafka 就绪 Kafka / Event Hubs 配置就绪。
命名空间
xmind-prod-event-hub
Broker
xmind-prod-event-hub.servicebus.windows.net:9093
SASL 用户名
$ConnectionString
认证模式
TLS + SASL/PLAIN
TLS / SNI
TLS / xmind-prod-event-hub.servicebus.windows.net
Topics
call.model.success.v2 · call.model.fail · call.model.interrupt
Group ID
test-vlan-check-consumer
Client ID
xmcmt-eventhubs-xmind-cloud-call-test-0
Begin Offset
latest

协议与被测模型

发送到 /v1/chat/completions;模型应使用 OpenAI 系列或被测实例的 OpenAI 兼容别名。

官方文档 gpt-5.4-mini gpt-5.5 gpt-5.4 gpt-5.4-nano

发送到 /v1/responses;模型应使用 OpenAI 系列或被测实例的 OpenAI 兼容别名。

官方文档 gpt-5.4-mini gpt-5.5 gpt-5.4 gpt-5.4-nano

发送到 /v1/messages;模型应使用 Claude/Anthropic 系列或对应别名。

官方文档 claude-sonnet-4-6 claude-opus-4-8 claude-haiku-4-5 claude-opus-4-7

模型写入 /v1beta/models/{model}:generateContent 路径;应使用 Gemini 系列或对应别名。

官方文档 gemini-3.5-flash gemini-3.5-pro gemini-2.5-flash gemini-2.5-pro