79일차 운영 데이터 기반 Ops Assistant: 실습 15개 · 강의(개요 30장 · 단계 문서 · 4단계 정리 · 05 바이브), 정답본 LAB-A · answers · VIBE-A · tops 포함

This commit is contained in:
mcchae committed 2026-11-03 20:54:35 +09:00
1 parent 9ce9aceba6
commit 6f0ecd59a9
156 files changed
+31640

No files matched your search

@@ -0,0 +1,77 @@
# 운영 도우미 설계표 · IT 헬프데스크 (2026-11-04 아침)
- 이름:
- 이 파일을 `my-work/OPS.md`로 복사해 채웁니다. 숫자는 `runs/`의 보고서나 `flow.py` 출력에서 옮깁니다.
## 1. 출처 둘러보기 · 기준 대시보드 (Lab 01 예제 1)
| 출처 | 어디서 (몇 일차) | `morning`에서 본 것 | 기준 대시보드(`base-ops-facts`)는 | 빠진 것 · 틀린 것 |
| --- | --- | --- | --- | --- |
| 실행 기록 | | | | |
| 알림 | | | | |
| DLQ | | | | |
| 품질 기록 · 격리함 | | | | |
| 사용량 · 예산 | | | | |
| 릴리스 | | | | |
- 가장 먼저 볼 곳과 이유:
## 2. 기간을 바꾸면 (Lab 01 예제 3)
| 기간 | 실행 · 오류 | 그대로인 것 | `null`이 된 것 |
| --- | --- | --- | --- |
| 두 주 | | | |
| 하루 (10/26) | | | |
| 빈 주 (11/02~11/06) | | | |
## 3. 상태 기준 (Lab 01 과제 1 · 2)
| 영역 | 상태 | 그 숫자 | 기준 | 바꾸고 싶은 것 |
| --- | --- | --- | --- | --- |
| | | | | |
- 출처가 멈춘 아침 (`fault usage error`): `cost` · `health.cost` · `overall` =
## 4. 도우미가 하면 안 되는 것 (Lab 02 예제 1 · 2)
| 질문 | 기준 챗봇의 답 | 무엇이 위험한가 | 내 도우미 |
| --- | --- | --- | --- |
| DLQ 1번 다시 돌려 줘 | | | |
| 점심 메뉴 추천해 줘 | | | |
| 카나리 버전 문제 있어? | | | |
- 숫자 확인이 잡지 못하는 것:
## 5. 질문을 바꾸면 · LLM 라우터 (Lab 02 예제 3 · 과제 1)
| 질문 | 낱말 라우터 | LLM 라우터를 붙인 뒤 | 맞나 |
| --- | --- | --- | --- |
| | | | |
## 6. 감사 기록 (Lab 02 과제 2)
| 질문 | 기록의 `area` · `refused` · `reason` | 이 기록으로 알 수 있는 것 |
| --- | --- | --- |
| | | |
## 7. 브리핑 (Lab 03 예제 1 · 2)
- 먼저 볼 것 셋:
- LLM 요약이 한 것 · 하지 않은 것:
## 8. 아침이 바뀌면 (Lab 03 예제 3)
| 사람이 한 일 | 빨강 | 먼저 볼 것 |
| --- | --- | --- |
| (처음) | | |
| parked 둘 처리 | | |
| 카나리 끔 | | |
| 예산 올림 | | |
## 9. 평가 · 관문 (Lab 03 과제 1 · 2)
| 평가 | score | gate | 틀린 케이스 |
| --- | --- | --- | --- |
| 골든 8 | | | |
- 평가가 남긴 알림이 다음 평가에 준 영향:
@@ -0,0 +1,31 @@
# 테스트 보고서 · Workflow Ops Assistant
- 이름:
- 사용한 CLI 에이전트: codex / claude / agy
- 워크플로우 파일: `my-work/ops-facts.json`, `my-work/ops-ask.json`, `my-work/ops-brief.json`, `my-work/ops-eval.json`
| 테스트 파일 | 결과 |
| --- | --- |
| `cases/lab01.json` (운영 사실) | Passed /5 |
| `cases/lab01-period.json` (기간을 바꾸면, 에이전트 없이) | Passed /5 |
| `cases/lab01-challenge.json` (영역별 상태) | Passed /5 |
| `cases/lab01-challenge2.json` (출처가 멈추면) | Passed /3 |
| `cases/lab02.json` (라우터 · 거절 · 숫자 확인) | Passed /6 |
| `cases/lab02-phrasing.json` (질문을 바꾸면, 에이전트 없이) | Passed /6 |
| `cases/lab02-challenge.json` (LLM 라우터) | Passed /5 |
| `cases/lab02-challenge2.json` (감사 기록) | Passed /5 |
| `cases/lab03.json` (브리핑) | Passed /4 |
| `cases/lab03-llm.json` (요약) | Passed /2 |
| `cases/lab03-after.json` (아침이 바뀌면, 에이전트 없이) | Passed /5 |
| `cases/lab03-challenge.json` (골든 질문 평가) | Passed /3 |
| `cases/lab03-challenge2.json` (평가 관문) | Passed /4 |
## 실패와 고친 내용
| 실패한 케이스 | 처음 결과 | 내가 생각한 원인 | 에이전트가 고친 곳 | 고친 뒤 |
| --- | --- | --- | --- | --- |
| | | | | |
## 도우미가 틀린 답 (숫자는 맞는데 뜻이 틀린 것 포함)
-