Binary CLI thật, giao tiếp HTTP với gateway mô phỏng. Đây là kết quả cục bộ, chưa xác nhận provider live hoặc triển khai từ xa.
+Commit: 422774fe3ba3d94c3e9be2e7082945ed54222770
SHA-256 binary: 5bd95979b1176002133def84734e3b98cd6d70cb107d58627ffb00cede9f7a27
VCS revision khớp commit và vcs.modified=false. Mỗi tiến trình dùng thư mục người dùng riêng, không dùng API key thật.
| Kịch bản | Kết quả | Bằng chứng |
|---|---|---|
| Health và revision của tiến trình CLI | Đạt | Chi tiết{
+ "gateway": "http://127.0.0.1:57085",
+ "journalEntries": 0,
+ "journalSessions": 0,
+ "sessions": 0,
+ "spendControl": {
+ "perRequest": {
+ "limit": 0.05,
+ "spent": 0,
+ "remaining": 0.05
+ },
+ "session": {
+ "limit": 10,
+ "spent": 0,
+ "remaining": 10
+ }
+ },
+ "status": "ok",
+ "version": "422774f"
+} |
| Catalog mới tự nạp khi khởi động | Đạt | Chi tiết{
+ "reads": 1,
+ "modelVisible": true
+} |
| Catalog lỗi giữ bản đóng gói | Đạt | Chi tiết{
+ "bundledFallback": true
+} |
| Model reasoning mới chuyển tiếp đúng metadata | Đạt | Chi tiết{
+ "status": 200,
+ "trace": [
+ {
+ "gateway": "stable",
+ "tag": "reasoning",
+ "model": "fixture/reasoner",
+ "sequence": 1,
+ "status": 200,
+ "reasoningNormalized": true
+ }
+ ]
+} |
| Alias miễn phí không thành model trả phí | Đạt | Chi tiết[
+ {
+ "gateway": "stable",
+ "tag": "free-alias",
+ "model": "free/nemotron-3.5-lightning",
+ "sequence": 1,
+ "status": 200,
+ "reasoningNormalized": true
+ }
+] |
| Model lỗi lặp lại được chuyển xuống cuối | Đạt | Chi tiết[
+ {
+ "gateway": "stable",
+ "tag": "repeat-failure-0",
+ "model": "google/gemini-2.5-flash",
+ "sequence": 1,
+ "status": 502,
+ "reasoningNormalized": true
+ },
+ {
+ "gateway": "stable",
+ "tag": "repeat-failure-0",
+ "model": "google/gemini-3-flash-preview",
+ "sequence": 2,
+ "status": 200,
+ "reasoningNormalized": true
+ },
+ {
+ "gateway": "stable",
+ "tag": "repeat-failure-1",
+ "model": "google/gemini-2.5-flash",
+ "sequence": 1,
+ "status": 502,
+ "reasoningNormalized": true
+ },
+ {
+ "gateway": "stable",
+ "tag": "repeat-failure-1",
+ "model": "google/gemini-3-flash-preview",
+ "sequence": 2,
+ "status": 200,
+ "reasoningNormalized": true
+ },
+ {
+ "gateway": "stable",
+ "tag": "repeat-failure-2",
+ "model": "google/gemini-2.5-flash",
+ "sequence": 1,
+ "status": 502,
+ "reasoningNormalized": true
+ },
+ {
+ "gateway": "stable",
+ "tag": "repeat-failure-2",
+ "model": "google/gemini-3-flash-preview",
+ "sequence": 2,
+ "status": 200,
+ "reasoningNormalized": true
+ },
+ {
+ "gateway": "stable",
+ "tag": "repeat-failure-3",
+ "model": "google/gemini-3-flash-preview",
+ "sequence": 1,
+ "status": 200,
+ "reasoningNormalized": true
+ }
+] |
| Phản hồi rỗng tiếp tục tới model có kết quả | Đạt | Chi tiết[
+ {
+ "gateway": "stable",
+ "tag": "empty-chain",
+ "model": "google/gemini-3.5-flash",
+ "sequence": 1,
+ "status": 200,
+ "reasoningNormalized": true
+ },
+ {
+ "gateway": "stable",
+ "tag": "empty-chain",
+ "model": "google/gemini-3.6-flash",
+ "sequence": 2,
+ "status": 200,
+ "reasoningNormalized": true
+ },
+ {
+ "gateway": "stable",
+ "tag": "empty-chain",
+ "model": "anthropic/claude-haiku-4.5",
+ "sequence": 3,
+ "status": 200,
+ "reasoningNormalized": true
+ }
+] |
| Chuỗi lỗi dừng sau tối đa 5 model | Đạt | Chi tiết[
+ {
+ "gateway": "stable",
+ "tag": "all-fail",
+ "model": "google/gemini-3.5-flash",
+ "sequence": 1,
+ "status": 502,
+ "reasoningNormalized": true
+ },
+ {
+ "gateway": "stable",
+ "tag": "all-fail",
+ "model": "google/gemini-3.6-flash",
+ "sequence": 2,
+ "status": 502,
+ "reasoningNormalized": true
+ },
+ {
+ "gateway": "stable",
+ "tag": "all-fail",
+ "model": "anthropic/claude-haiku-4.5",
+ "sequence": 3,
+ "status": 502,
+ "reasoningNormalized": true
+ },
+ {
+ "gateway": "stable",
+ "tag": "all-fail",
+ "model": "zai/glm-5.3",
+ "sequence": 4,
+ "status": 502,
+ "reasoningNormalized": true
+ },
+ {
+ "gateway": "stable",
+ "tag": "all-fail",
+ "model": "google/gemini-3.5-flash-lite",
+ "sequence": 5,
+ "status": 502,
+ "reasoningNormalized": true
+ }
+] |
| Model chỉ định không bị thay bằng fallback | Đạt | Chi tiết[
+ {
+ "gateway": "stable",
+ "tag": "explicit-pin-fails",
+ "model": "openai/gpt-4o-mini",
+ "sequence": 1,
+ "status": 502,
+ "reasoningNormalized": true
+ }
+] |
| Mất phản hồi không làm gửi lại request | Đạt | Chi tiết[
+ {
+ "gateway": "stable",
+ "tag": "lost-response",
+ "model": "google/gemini-3-flash-preview",
+ "sequence": 1,
+ "status": "socket-closed",
+ "reasoningNormalized": true
+ }
+] |
| SSE giữ nội dung và dấu kết thúc | Đạt | Chi tiết{
+ "status": 200,
+ "done": true
+} |
| Giá cao bị chặn trước khi gửi | Đạt | Chi tiết{
+ "status": 429,
+ "upstreamSends": 0
+} |
| Giá cố định bằng 0 không vượt spend limit | Đạt | Chi tiết{
+ "status": 429,
+ "upstreamSends": 0
+} |
| Host và Origin không tin cậy bị từ chối | Đạt | Chi tiết{
+ "initialDriverFailure": {
+ "error": "Expected values to be strictly equal:\n\n429 !== 403\n"
+ },
+ "recheck": {
+ "checkedAt": "2026-10-22T14:32:04.813Z",
+ "revision": "422774fe3ba3d94c3e9be2e7082945ed54222770",
+ "binarySha256": "5bd95979b1176002133def84734e3b98cd6d70cb107d58627ffb00cede9f7a27",
+ "transport": "node:http sends the literal Host header",
+ "originalDriverIssue": "Node fetch ignored the overridden Host header and sent the loopback host; its 429 was a driver error, not a guard failure.",
+ "results": [
+ {
+ "headers": {
+ "Origin": "https://attacker.invalid"
+ },
+ "status": 403
+ },
+ {
+ "headers": {
+ "Origin": "null"
+ },
+ "status": 403
+ },
+ {
+ "headers": {
+ "Host": "attacker.invalid"
+ },
+ "status": 403
+ },
+ {
+ "headers": {
+ "Sec-Fetch-Site": "cross-site"
+ },
+ "status": 403
+ }
+ ],
+ "upstreamSends": 0
+ },
+ "evidenceFile": "host-origin-probe.json"
+} |
| Prompt CJK dài được nâng tier theo số token | Đạt | Chi tiết{
+ "tier": "COMPLEX",
+ "reason": "Input exceeds 100000 tokens"
+} |
| Reservation đồng thời và settlement trả lại ngân sách | Đạt | Chi tiết{
+ "first": 200,
+ "whileInFlight": 429,
+ "afterSettlement": 200
+} |
| Refresh 5 phút và phục hồi catalog | Đạt | Chi tiết{
+ "intervals": [
+ {
+ "gateway": "stable",
+ "intervalMs": 300011
+ },
+ {
+ "gateway": "recovery",
+ "intervalMs": 300012
+ }
+ ],
+ "lastGoodRetained": true,
+ "recoveredFromInvalidStartup": true
+} |
| Accounting chỉ ghi vào thư mục thử nghiệm | Đạt | Chi tiết{
+ "isolatedProfiles": 3,
+ "historyCounts": [
+ 20,
+ 0,
+ 2
+ ],
+ "syntheticOnly": true
+} |
Playwright xác minh health, catalog và chat từ cùng origin; điều hướng cross-site nhận HTTP 403. Các tiến trình CLI thử nghiệm đã thoát và các cổng của chúng không còn truy cập được.
{
+ "browser": {
+ "chatStatus": 200,
+ "sameOriginHealthStatus": "ok",
+ "chatModel": "fixture/reasoner",
+ "requestFetchSite": "same-origin",
+ "driver": "MCP Playwright",
+ "catalogDiscovered": true,
+ "healthVersion": "422774f",
+ "crossSiteNavigationStatusObserved": 403
+ },
+ "shutdown": {
+ "allOwnedProcessesExited": true,
+ "portsClosed": true
+ }
+}Lần đầu, Node fetch bỏ qua Host giả mạo nên phép thử nhận 429. Gửi lại bằng HTTP trực tiếp giữ nguyên Host cho kết quả 403 ở cả bốn tình huống, không gửi request tới gateway. Bằng chứng lỗi ban đầu và lần kiểm tra lại đều được giữ trong JSON.
Repo chưa có môi trường staging từ xa được cấu hình. Không gọi model live, không có giao dịch thanh toán và không thay đổi dịch vụ đang phục vụ. Phí trong fixture là dữ liệu giả để kiểm tra accounting.
Binary CLI thật, giao tiếp HTTP với gateway mô phỏng. Đây là kết quả cục bộ, chưa xác nhận provider live hoặc triển khai từ xa.
+Commit: ${escape(evidence.revision)}
SHA-256 binary: ${escape(evidence.binarySha256)}
VCS revision khớp commit và vcs.modified=false. Mỗi tiến trình dùng thư mục người dùng riêng, không dùng API key thật.
| Kịch bản | Kết quả | Bằng chứng |
|---|---|---|
| ${escape(c.label)} | ${c.pass ? 'Đạt':'Chưa đạt'} | Chi tiết${escape(JSON.stringify(c.details,null,2))} |
${browserPassed ? 'Playwright xác minh health, catalog và chat từ cùng origin; điều hướng cross-site nhận HTTP 403.' : 'Browser chưa có đủ bằng chứng đạt.'} ${shutdownPassed ? 'Các tiến trình CLI thử nghiệm đã thoát và các cổng của chúng không còn truy cập được.' : 'Chưa xác nhận các tiến trình thử nghiệm đã đóng hoàn toàn.'}
${escape(JSON.stringify({browser:evidence.browser,shutdown:evidence.shutdown},null,2))}Lần đầu, Node fetch bỏ qua Host giả mạo nên phép thử nhận 429. Gửi lại bằng HTTP trực tiếp giữ nguyên Host cho kết quả 403 ở cả bốn tình huống, không gửi request tới gateway. Bằng chứng lỗi ban đầu và lần kiểm tra lại đều được giữ trong JSON.
Repo chưa có môi trường staging từ xa được cấu hình. Không gọi model live, không có giao dịch thanh toán và không thay đổi dịch vụ đang phục vụ. Phí trong fixture là dữ liệu giả để kiểm tra accounting.