{ "cases": "lab03-canary.json", "webhook": "my-helpdesk", "passed": 3, "total": 6, "results": [ { "case": "최유진 (bucket 0) → 카나리", "webhook": "my-helpdesk", "run": 1, "passed": false, "problems": [ "version.release = 1.0.0 (expected 1.1.0)", "version.channel = stable (expected canary)" ], "seconds": 1.1, "status": 200, "request": { "question": "프린터 출력이 안 돼요", "user": "최유진" }, "response": { "route": "자동 답변", "answer": "프린터 전원과 네트워크 연결을 확인하고, 인쇄 대기열을 비운 뒤 다시 출력해 보시기 바랍니다. 접수된 문의 건은 없으며, 추가 도움이 필요하시면 담당자가 도와드리겠습니다.", "sources": [ "FAQ-004" ], "version": { "release": "1.0.0", "prompt_version": "p1", "model": "gpt-4.1-mini", "channel": "stable", "prompt_source": "registry" } } }, { "case": "정우성 (bucket 42) → 카나리", "webhook": "my-helpdesk", "run": 1, "passed": false, "problems": [ "version.release = 1.0.0 (expected 1.1.0)", "version.channel = stable (expected canary)" ], "seconds": 1.3, "status": 200, "request": { "question": "VPN 접속이 자꾸 끊겨요. 어떻게 하나요?", "user": "정우성" }, "response": { "route": "자동 답변", "answer": "VPN 접속 오류는 VPN 클라이언트를 최신 버전으로 업데이트하고, 인증서 만료 여부를 확인한 뒤 다시 접속하시기 바랍니다. 현재 접수된 문의 건이 없어 추가 지원이 필요하시면 IT 담당자에게 문의해 주세요.", "sources": [ "FAQ-003" ], "version": { "release": "1.0.0", "prompt_version": "p1", "model": "gpt-4.1-mini", "channel": "stable", "prompt_source": "registry" } } }, { "case": "이준호 (bucket 56) → 운영", "webhook": "my-helpdesk", "run": 1, "passed": true, "problems": [], "seconds": 1.3, "status": 200, "request": { "question": "VPN 접속이 자꾸 끊겨요. 어떻게 하나요?", "user": "이준호" }, "response": { "route": "자동 답변", "answer": "VPN 접속 오류는 VPN 클라이언트를 최신 버전으로 업데이트하고, 인증서 만료 여부를 확인한 뒤 다시 접속하시기 바랍니다. 현재 접수된 문의 건은 없습니다. 추가 도움이 필요하시면 담당자가 도와드리겠습니다.", "sources": [ "FAQ-003" ], "version": { "release": "1.0.0", "prompt_version": "p1", "model": "gpt-4.1-mini", "channel": "stable", "prompt_source": "registry" } } }, { "case": "김민지 (bucket 80) → 운영", "webhook": "my-helpdesk", "run": 1, "passed": true, "problems": [], "seconds": 1.1, "status": 200, "request": { "question": "메일함 용량이 꽉 찼대요", "user": "김민지" }, "response": { "route": "자동 답변", "answer": "메일함 용량이 초과된 경우, 오래된 메일과 큰 첨부 파일을 보관함으로 옮기거나 삭제하여 용량을 확보하시기 바랍니다. 현재 접수된 관련 문의는 없습니다. 추가 도움이 필요하시면 담당 직원이 도와드리겠습니다.", "sources": [ "FAQ-005" ], "version": { "release": "1.0.0", "prompt_version": "p1", "model": "gpt-4.1-mini", "channel": "stable", "prompt_source": "registry" } } }, { "case": "고정이 카나리보다 먼저", "webhook": "my-helpdesk", "run": 1, "passed": true, "problems": [], "seconds": 1.0, "status": 200, "request": { "question": "프린터 출력이 안 돼요", "user": "최유진", "release": "1.0.0" }, "response": { "route": "자동 답변", "answer": "프린터 전원과 네트워크 연결을 확인하고, 인쇄 대기열을 비운 뒤 다시 출력해 보시기 바랍니다. 접수된 문의 건은 없으며, 추가 도움이 필요하시면 직원이 도와드리겠습니다.", "sources": [ "FAQ-004" ], "version": { "release": "1.0.0", "prompt_version": "p1", "model": "gpt-4.1-mini", "channel": "pinned", "prompt_source": "registry" } } }, { "case": "같은 사람은 늘 같은 쪽", "webhook": "my-helpdesk", "run": 1, "passed": false, "problems": [ "version.release = 1.0.0 (expected 1.1.0)", "version.channel = stable (expected canary)" ], "seconds": 1.2, "status": 200, "request": { "question": "프린터 출력이 안 돼요", "user": "최유진" }, "response": { "route": "자동 답변", "answer": "프린터 전원과 네트워크 연결을 확인하고, 인쇄 대기열을 비운 뒤 다시 출력해 보시기 바랍니다. 추가 도움이 필요하시면 담당 직원이 도와드리겠습니다.", "sources": [ "FAQ-004" ], "version": { "release": "1.0.0", "prompt_version": "p1", "model": "gpt-4.1-mini", "channel": "stable", "prompt_source": "registry" } } } ] }