71일차 신뢰도 기준 충족 추가 (2단계 6절, Lab 02 과제 마무리, RAG-EVAL 3-1절)
This commit is contained in:
1 parent
3ff10aadcf
commit
4ef0464525
5 files changed
+58
-1
No files matched your search
@@ -24,6 +24,18 @@
|
||||
|
||||
- 관련도 기준 0.33에 걸러지지 않았는데 규정에 답이 없는 질문:
|
||||
|
||||
## 3-1. 신뢰도 기준 충족 (Lab 02 과제 뒤)
|
||||
|
||||
신뢰도 기준 = 관련도 기준(`top_score` ≥ 0.33, 답 만들기 전) + 답 검사 넷 모두 통과(답 만든 뒤). 빈 질문(400)은 세지 않습니다.
|
||||
|
||||
| 테스트 파일 | 질문 수 | 기준 충족 (자동 답변) | 미달 · 관련도 기준 | 미달 · 답 검사 | 충족률 |
|
||||
| --- | --- | --- | --- | --- | --- |
|
||||
| `cases/lab02.json` | | | | | |
|
||||
| `cases/lab02-challenge.json` (첫 실행) | | | | | |
|
||||
| 합계 | | | | | |
|
||||
|
||||
- 답 검사에서 넘어간 질문 (규정을 보완할 후보):
|
||||
|
||||
## 4. 한 가지씩 바꾸고 재기 (Lab 03)
|
||||
|
||||
| 설정 | 청크 수 | doc@1 | answer@1 | answer@3 |
|
||||
|
||||
Reference in new issue
Block a user