Anonymous Intelligence Signal
国内团队推出Probe Kit:专测AI中转站是否在接口上动手脚
AI API中转站正成为模型调用链路中最不透明的环节。输入一个OpenAI兼容接口地址,你以为自己在跑某个模型、支付对应费用,但实际上中转站可能擅自替换模型、截取提示词、伪造usage数据。国内一支AI基础设施团队为此开发了Probe Kit——一个专门针对中转站行为进行系统性探测的检测工具。
Probe Kit覆盖9大类检测维度:模型身份验证(实际跑的是不是声称的模型)、提示词完整性(system prompt和护栏是否被剥离)、协议规范透传(stop sequence、采样参数是否忠实传递)、工具调用结构(tool_calls是否被篡改)、上下文窗口截断(长上下文是否被偷偷截断)、伪流式与缓存重放、计费可信度(usage和token数是否真实)、安全隔离(会话隔离、凭据泄漏、隐藏追踪载荷)以及基础性能指标。目前已完成公开展示,官网提供直接试用入口。
该团队指出,当前市面上对中转站的评测大多停留在“能不能连上”和“速度如何”,但对AI基础设施使用者而言,更关键的问题是:中转站在请求或响应的每一个环节里,到底有没有做额外操作。值得注意的是,检测本身会产生真实API调用,以Opus 4.5级别模型为例,一次完整检测约消耗0.5美元、耗时3-5分钟。团队建议使用临时Key,测完即删除。中转站生态中的信息不对称和操作空间,正成为AI调用链路上的信任黑盒。