推荐(A):六问全部通过
- 依据
- 六问:通过 6。置信:高置信——多条独立证据一致。
- 建议
- 可直接用于生产;建议约定高峰时段复测一次作为验收。
- 1通不通通过
- 2真不真通过
- 3全不全通过
- 4快不快通过
- 5值不值通过
- 6哪来的通过
官方参照
结论怎么来的:每单都拿 Anthropic 官方 API 当协议「标准答案」,宣称云平台产地的再加对应官方端点做产地对照。
api.anthropic.com 直连 · 协议金标准(官方签名验证终审)
每单必跑、含在价内。拿 Anthropic 官方 API 当「标准答案」,被测线路的行为逐项与官方比。
- 官方同题对照:推理题 / 身份题 / 知识边界,官方与被测线路同题各答一遍
- 官方签名验证(终审):把被测线路给出的思考块签名送官方验真,改坏一字符必须被官方拒绝
- 参数对照:格式化 / 预填充 / 采样参数,官方怎么处理、被测线路怎么处理
- 用量对账:官方 count_tokens 对被测线路报的 token 数,看有没有多报
bedrock-runtime.{region}.amazonaws.com 原生端点 + Bearer 凭证 · 产地金标准(Bedrock 固有行为)
宣称 AWS Bedrock 的线路按宣称自动加;没宣称的也可手动加来证伪产地。用 Bedrock 原生端点同型号跑一遍,分清「产地固有」与「本线特有」。
二六问逐项证据
一句话结论 → 引擎说明 → 测什么、怎么测 → 观测值 → 指标 → 原始信号 → 复现步骤。
线路连得上、流得稳吗
线路连得上,流式与并发场景都稳
| 维度 | 状态 | 说明 |
|---|---|---|
| 流式 SSE 结构 | 通过 | 事件序列符合官方规范(10 事件);thinking_delta=有 signature_delta=有;TTFT 1.6s |
| 短题并发爬坡 | 通过 | 会话轻量爬坡· 15/15 成功;高峰错误率 0%;429 共 0(高峰 0%);c1 p50=2013ms / c5 p50=2660ms / c10 p50=2191ms;c1 p95=2314ms / c5 p95=2759ms / c10 p95=2574ms |
| 响应头指纹 | 未测 | 无 request-id · 无 anthropic-ratelimit 头(多数中转会剥) · server=nginx |
| 请求一致性(防重放) | 有条件 | 模型未按要求回显校验码,本轮无法判定 |
- l0
- pass
- sse
- pass
- concurrency
- pass
原始信号清单(4 条)
- 流式 SSE 结构:事件序列符合官方规范(10 事件);thinking_delta=有 signature_delta=有;TTFT 1.6s
- 短题并发爬坡:会话轻量爬坡· 15/15 成功;高峰错误率 0%;429 共 0(高峰 0%);c1 p50=2013ms / c5 p50=2660ms / c10 p50=2191ms;c1 p95=2314ms / c5 p95=2759ms / c10 p95=2574ms
- 请求一致性(防重放):模型未按要求回显校验码,本轮无法判定
- 响应头指纹:无 request-id · 无 anthropic-ratelimit 头(多数中转会剥) · server=nginx
- 用同一 Base URL / Key 发一条最短 messages 请求(stream=true),核对 SSE 事件序列:message_start → content_block_* → message_delta → message_stop。
- 以 5 → 10 → 15 并发重复短题,记录错误率与首字抖动。
后面是不是宣称的模型
官方签名核验通过:后面确实是 Claude
| 维度 | 状态 | 说明 |
|---|---|---|
| ID 前缀/形态 | 通过 | 4 个 id 全部符合已收录真实形态(01+22 位 base62;前缀 msg_) |
| model 字段([1m] 泄漏) | 通过 | 标准命名:claude-opus-5 |
| thinking signature 存在 | 通过 | signature 832 字(enabled) |
| 签名回验(官方终审) | 通过 | 官方端点接受该思考块(签名有效——真 Claude 生成;经 adaptive 回退回验) |
| 改坏签名再验(系统自检) | 通过 | 阴性对照通过:篡改签名被拒(HTTP 400)。messages.1.content.0: Invalid `signature` in `thinking` block |
| 型号是否对代 | 通过 | 代际绑定符合:低档/上一代均丢弃思考块(claude-sonnet-5, claude-opus-4-8) |
| LLM 指纹 · 知识边界 | 通过 | 被测:「2025年1月」 vs 官方:「2025 年 1 月。」 · 截止对齐 2025-1 |
| 身份题 ×3 | 通过 | 1 轮均泛化自称 Claude(与裸 API 行为一致) |
| 官方同题对照(自建金标准) | 通过 | 官方同题对照通过(4 项对齐)——自建金标准,不依赖 cctest |
- l2
- pass
- identity
- pass
- signatureVerify
- pass
- officialBenchmark
- pass
原始信号清单(13 条)
- model 字段:标准命名:claude-opus-5
- 消息 id 形态:4 个 id 全部符合已收录真实形态(01+22 位 base62;前缀 msg_)
- 身份题×3:1 轮均泛化自称 Claude(与裸 API 行为一致)
- token 注入:大题对账正常:实报 5489 vs 官方 5489,Δ=+0(0.0%)。
- 签名回验(官方终审):官方端点接受该思考块(签名有效——真 Claude 生成;经 adaptive 回退回验)
- 改坏签名再验(系统自检):阴性对照通过:(同上)
- 官方同题对照(自建金标准):官方同题对照通过(4 项对齐)——自建金标准,不依赖 cctest
- thinking signature 存在:signature 832 字(enabled)
- 型号是否对代:代际绑定符合:低档/上一代均丢弃思考块(claude-sonnet-5, claude-opus-4-8)
- model 字段([1m] 泄漏):标准命名:claude-opus-5
- ID 前缀/形态:4 个 id 全部符合已收录真实形态(01+22 位 base62;前缀 msg_)
- 身份题 ×3:1 轮均泛化自称 Claude(与裸 API 行为一致)
- LLM 指纹 · 知识边界:被测:「2025年1月」 vs 官方:「2025 年 1 月。」 · 截止对齐 2025-1
- 请求开启 thinking,取回包中的思考块签名。
- 把该思考块原样回传官方 Messages API 续接:官方接受 = 该思考确由 Claude 生成;把签名改坏一位再发,官方应以 400 拒绝(阴性对照)。
- 同题对照:与官方直连比对推理结论、知识边界与身份题回答。
请求有没有被改、能力有没有打折
参数与工具调用原样到达模型
| 维度 | 状态 | 说明 |
|---|---|---|
| tool_use / toolu_ id | 通过 | tool_use id=toolu_01LQ9M8azKnqBhtmobZRwt2P…(已收录形态) |
| stop_reason 合法值 | 通过 | 均为合法值(end_turn、tool_use) |
| System Prompt 服从 | 有条件 | 首题空正文,无法判定 |
| stop_sequences 语义 | 通过 | stop_sequences 生效:在「STOPWORD」前截断,stop_reason=stop_sequence |
| max_tokens 截断 | 通过 | max_tokens=8 生效:stop_reason=max_tokens,output_tokens=8 |
| 多轮对话记忆(语义) | 通过 | 历史消息完整转发:第二轮正确复述暗号 |
| 多轮签名回传(被测线) | 通过 | 被测线接受签名回传并续聊 200(多轮/cc 场景可用;含占位 tools 防假通过) |
| 响应体 Schema 合规 | 通过 | 5 个非流式回包均符合官方 Messages 响应结构(id/type/role/content/stop_reason/usage) |
| 错误对象 Schema · 参数错误 | 有条件 | HTTP 500:对 messages=[] 这种参数错误回 5xx——正规网关应在本地校验并回 400,它把坏请求原样转给了上游被拒(透传型中继特征);不定罪,须告知 · 无 request-id 头 |
| 错误对象 Schema · 鉴权错误 | 未测 | 鉴权层错误体为 OpenAI 形(HTTP 401 · gateway_error)——new-api 系网关特征(middleware 统一 new_api_error),记录不定罪 |
| thinking 配置原样转发(enabled) | 有条件 | 官方该型号不支持 thinking.type=enabled(400「not supported…use adaptive」),被测线 200 并返回带 signature 的思考块(0 字)——网关把 enabled 兼容改写为 adaptive(中转常见的参数兼容,提及不扣分;budget_tokens 不再生效,需要精确 enabled 语义的客户请直接按官方文档用 adaptive) |
| 可蒸馏(签名透传/回验) | 有条件 | 承诺测试:官方拒绝接续该思考块(stop_reason=refusal)。官方直连同型号也会出现,提及不扣分,不作为可蒸馏否证。 |
- l1
- pass
- schema
- pass
- toolUse
- pass
- multiTurnSignature
- pass
原始信号清单(12 条)
- 响应体 Schema 合规:5 个非流式回包均符合官方 Messages 响应结构(id/type/role/content/stop_reason/usage)
- stop_reason 合法值:均为合法值(end_turn、tool_use)
- stop_sequences 语义:stop_sequences 生效:在「STOPWORD」前截断,stop_reason=stop_sequence
- max_tokens 截断:max_tokens=8 生效:stop_reason=max_tokens,output_tokens=8
- System Prompt 服从:首题空正文,无法判定
- tool_use / toolu_ id:tool_use id=toolu_01LQ9M8azKnqBhtmobZRwt2P…(已收录形态)
- 多轮对话记忆(语义):历史消息完整转发:第二轮正确复述暗号
- 多轮签名回传(被测线):被测线接受签名回传并续聊 200(多轮/cc 场景可用;含占位 tools 防假通过)
- thinking 配置原样转发(enabled):官方该型号不支持 thinking.type=enabled(400「not supported…use adaptive」),被测线 200 并返回带 signature 的思考块(0 字)——网关把 enabled 兼容改写为 adaptive(中转常见的参数兼容,提及不扣分;budget_tokens 不再生效,需要精确 enabled 语义的客户请直接按官方文档用 adaptive)
- 错误对象 Schema · 参数错误:HTTP 500:对 messages=[] 这种参数错误回 5xx——正规网关应在本地校验并回 400,它把坏请求原样转给了上游被拒(透传型中继特征);不定罪,须告知 · 无 request-id 头
- 错误对象 Schema · 鉴权错误:(同上) · gateway_error)——(同上)
- 可蒸馏(签名透传/回验):承诺测试:(同上)
- 逐项发送带 stop_sequences / max_tokens / system / tools 的请求,核对回包是否严格遵守。
- 多轮对话携带上一轮思考块(含签名)回传,确认被接受而非被剥离。
首字比官方慢多少
首字约官方 1.4 倍,与官方相当
| 维度 | 状态 | 说明 |
|---|---|---|
| 访问速度 · TTFT | 通过 | 首字快 · 开口速度(短答) 1.97s · 官方同型号当场 1.39s(约 1.42 倍) · 流式总耗时 2.4s · 思考耗时 4.3s(快<2s / 正常<5s / 慢≥5s;等级优先看短答开口速度) |
- grade
- fast
- ttftMs
- 1972
- ttftRatio
- 1.42
- officialTtftMs
- 1390
- streamDurationMs
- 2379
- thinkingDurationMs
- 4311
原始信号清单(1 条)
- 访问速度 · TTFT:首字快 · 开口速度(短答) 1.97s · 官方同型号当场 1.39s(约 1.42 倍) · 流式总耗时 2.4s · 思考耗时 4.3s(快<2s / 正常<5s / 慢≥5s;等级优先看短答开口速度)
- 同题、同时段、同区域对官方直连与被测线各取至少 3 次首字时延,取中位数比值。
计费和官方一样吗,有没有暗塞内容
计费与官方一致,没有暗塞的内容
| 维度 | 状态 | 说明 |
|---|---|---|
| count_tokens 对账(注入分级) | 通过 | 大题对账正常:实报 5489 vs 官方 5489,Δ=+0(0.0%)。 |
| 大题计费对账 | 通过 | 被测 total=5489(in=5489 cc=0 cr=0) · 官方 count_tokens=5489 |
| cache 计费语义 | 通过 | usage 含 cache 两键(官方语义) |
| 缓存率 · 冷/热 | 有条件 | 冷轮 create=6330 read=0 · 热命中 3/6 (50%) · 命中中等(50%–90%) |
| 缓存 TTL · 1h 语义 | 未通过 | 冷轮 1h 写入 14012 token(官方细分字段在);热轮未命中(read=0)——同前缀连打都不命中,缓存不稳/多账号轮换 | 复查:距冷轮 1.1 分钟就已失效(read=0)——连 5m 都撑不住,缓存不稳 |
- l4
- pass
- cacheSemantics
- pass
- injectionGrade
- none
- injectionRatio
- 0
- officialTokens
- 5489
- reportedTokens
- 5489
- injectionDeltaTokens
- 0
原始信号清单(5 条)
- count_tokens 对账(注入分级):大题对账正常:实报 5489 vs 官方 5489,Δ=+0(0.0%)。
- 大题计费对账:被测 total=5489(in=5489 cc=0 cr=0) · 官方 count_tokens=5489
- cache 计费语义:usage 含 cache 两键(官方语义)
- 缓存率 · 冷/热:冷轮 create=6330 read=0 · 热命中 3/6 (50%) · 命中中等(50%–90%)
- 缓存 TTL · 1h 语义:冷轮 1h 写入 14012 token(官方细分字段在);热轮未命中(read=0)——同前缀连打都不命中,缓存不稳/多账号轮换 | 复查:距冷轮 1.1 分钟就已失效(read=0)——连 5m 都撑不住,缓存不稳
- 同一段长文本分别调用被测线与官方 count_tokens,差值即注入量。
- 大题:比对 usage.input_tokens 与官方同请求的计数。
- 缓存:同一 cache_control 前缀连发两次,第二次应出现 cache_read_input_tokens。
货从哪里来,和宣称一致吗
货源:官方直连或多账号轮换(这次分不出)
| 维度 | 状态 | 说明 |
|---|---|---|
| web_search(官方/池常见,逆向难真) | 通过 | 出现服务端搜索块 ×4(官方/池常见;不能单凭此项区分官转与池) |
| cctest 第三方检测 | 未测 | 未跑(未接入或未勾选) |
| claude-detector 19 探针 | 未测 | 未跑(未接入或未勾选) |
| thinking 显示样式(对照官方) | 未测 | 被测:omitted(0 字,只有签名)(0 字) · 官方同型号:omitted(0 字,只有签名)(0 字)——与官方同型号一致 |
| 产地证据包 | 通过 | 前缀 msg_ · 订阅池常见信号 0 项 · 判定 层级 1 · 官方形态(官转或优质池未分)(高置信) |
- tier
- official
- idPrefix
- msg_
- claimResult
- match
- claimedTier
- ccmax
- tierConfidence
- 高置信
- poolSignalCount
- 0
原始信号清单(11 条)
- 同上(见前文)
- id=msg_ 标准形态,无任何 CC/注入强信号
- 签名回验通过
- 同上(见前文)
- web_search 可用(官方/池常见;不能单凭区分官转与池)
- 诚实边界:官转与优质池同形——未与账单/断供交叉前标「官转或优质池未分」
- 产地证据包:前缀 msg_ · 订阅池常见信号 0 项 · 判定 层级 1 · 官方形态(官转或优质池未分)(高置信)
- web_search(官方/池常见,逆向难真):出现服务端搜索块 ×4(官方/池常见;不能单凭此项区分官转与池)
- thinking 显示样式(对照官方):被测:omitted(0 字,只有签名)(0 字) · 官方同型号:omitted(0 字,只有签名)(0 字)——与官方同型号一致
- cctest 第三方检测:未跑(未接入或未勾选)
- claude-detector 19 探针:未跑(未接入或未勾选)
- 记录消息 id 前缀、响应头族、web_search / tool_use 可用性、思考显示样式,与四类货源形态对照表比对。
三整改清单
六问均通过,这次没有整改项。
四AAW Verify · Summary
English summary — the only English block in this report.
claude-opus-5 · Grade A · Recommended · High confidence. All six questions passed (speed may be conditional); suitable for production use.
- 1ReachabilityPassReachable; streaming and concurrency are stable
- 2AuthenticityPassOfficial signature verification passed: it is genuinely Claude
- 3Protocol integrityPassParameters and tool calls reach the model unaltered
- 4SpeedPassTTFT ≈ 1.4× official, within the normal range
- 5Billing & valuePassBilling matches the official API; nothing injected
- 6OriginPassOfficial pattern: direct official API or a high-quality account pool (indistinguishable this round)
Rules rules-4.2 · bank-2026.09. This summary is generated by AAW Verify from a single assessment run under the stated rule version. It reflects measurements at the time of testing only and is not a guarantee of future behaviour, availability or pricing.
五签章与核验
- 核验码
- AAW-AR-claude-165-d94880bc921b
- 出具时间
- 2026/9/30 20:39:45
- 规则 / 题库版本
- rules-4.2 · bank-2026.09
- 归档编号
- #165
签章覆盖的总评句:官方签名核验通过:后面确实是 Claude;货源:官方直连或多账号轮换(这次分不出)
按出具当时规则 rules-4.2 · 题库 bank-2026.09 出具;规则升级不追溯改写历史报告。
签章由 AAW-鉴定 服务端 HMAC 生成,覆盖型号、等级、置信、实测时间、六问结论指纹与规则版本;改动任一字段签章即失效。核验页只返回摘要,不泄露报告正文。
去核验这份报告六附录 · 引擎证据
五层判定
- L0连通通过
被测线可达且 200
- L1协议通过
同上(见前文)
- L2模型通过
同上(见前文)
- L3产地通过
判定:层级 1 · 官方形态(官转或优质池未分)(高置信) · 符合订阅池·可蒸馏标尺:(同上) · 官方形态(官转或优质池未分)(高置信)
- L4计费通过
同上(见前文)
硬信号
- S1model 字段通过
标准命名:claude-opus-5
- S2消息 id 形态通过
同上(见前文)
- S3身份题×3通过
同上(见前文)
- S4token 注入通过
同上(见前文)
货源判定
- 同上(见前文)
- 签名回验通过
- 同上(见前文)
- 同上(见前文)
- 同上(见前文)
宣称 ccmax · 比对 match · 符合订阅池·可蒸馏标尺:(同上) · 官方形态(官转或优质池未分)(高置信)
同上(见前文)
- id 前缀通过观测前缀=msg_
- 订阅池常见信号通过未见 [1m]/回显/CC 自称/强注入/缺 cache 等订阅池常见信号(微注入单独计)
- web_search通过有服务端搜索块(官方/池常见,不能单凭证官转)
- toolu_通过toolu 形态=已收录
- 签名回验通过同上(见前文)
速度 · 计费 · 打分
速度:首字快 · 同上(见前文)
计费:0注入(计费正常) · 同上(见前文)
同上(见前文)
- 推理结论未测题库 other-len-hello · 被测:提取失败 vs 官方:5
- id 前缀族通过被测前缀=msg_;官方参照前缀=msg_
- 签名回验通过同上(见前文)
- 知识边界通过同上(见前文)
- cache 语义同构通过被测 cache 键=有;官方=有
- 真伪与签名25/25同上(见前文)
- 思考是否跟这次对话走20/20思考承诺:(同上)
- 型号是否对代15/15同上(见前文)
- 协议是否被改写15/15大题对账正常:实报 5489 vs 官方 5489,Δ=+0(0.0%)。 · 协议服从 3/4 过;未定:System Prompt 服从 · thinking 配置:enabled 被兼容改写为 adaptive(中转常见参数兼容,提及不扣分)
- 缓存是否省钱6/10冷轮 create=6330 read=0 · 热命中 3/6 (50%) · 命中中等(50%–90%) · 1h TTL:冷轮 1h 写入 14012 token(官方细分字段在);热轮未命中(read=0)——同前缀连打都不命中,缓存不稳/多账号轮换 | 复查:距冷轮 1.1 分钟就已失效(read=0)——连 5m 都撑不住,缓存不稳 · (省钱问题:命中低意味着重复前缀按全价计,不影响真伪与产地判断)
- 速度5/5首字快 · 开口速度(短答) 1.97s · 官方同型号当场 1.39s(约 1.42 倍) · 流式总耗时 2.4s · 思考耗时 4.3s(快<2s / 正常<5s / 慢≥5s;等级优先看短答开口速度) · 会话轻量爬坡· 15/15 成功;高峰错误率 0%;429 共 0(高峰 0%);c1 p50=2013ms / c5 p50=2660ms / c10 p50=2191ms;c1 p95=2314ms / c5 p95=2759ms / c10 p95=2574ms
- 能力面10/10同上(见前文)
蒸馏目的加权综合 97.9/100 → 证据充足
思考过程回传专项:warn · 同上(见前文)
其余指纹维度(5)
| 维度 | 状态 | 说明 |
|---|---|---|
| 思考是否跟这次对话走 | 有条件 | 官方拒绝接续(refusal)。官方直连同型号也会出现,提及不扣分。 |
| LLM 指纹 · 推理题(other-len-hello) | 未测 | 题库 other-len-hello · 被测结论:提取失败 vs 官方:5 |
| 多模态 · 图/PDF | 通过 | 图:识别为红(「red」) · PDF:读到 HELLO(「HELLO」) |
| 长上下文 · needle | 通过 | 命中订单编号(上下文约 10313 字) |
| 思维链正文获取尝试(多方式) | 通过 | 拿到思考正文:adaptive + display=summarized + effort=high 返回 149 字(全文),带 signature |