콘텐츠로 이동

LLM 평가와 관측성

모델과 LLM 기반 시스템의 품질 기준과 배포 게이트를 설계하는 평가 담당자 대상의 핵심 개념부터 평가·운영·통제까지 백과 문서를 순서대로 연결한 전문 학습 코스다.

대상: 모델과 LLM 기반 시스템의 품질 기준과 배포 게이트를 설계하는 평가 담당자

  1. 모델 평가
  2. 평가 지표
  3. 벤치마크
  4. 벤치마크 데이터셋
  5. 벤치마크 모음
  6. 벤치마크 타당도
  7. 벤치마크 오염
  8. 평가 루브릭
  9. 평가 표본추출
  10. 평가 불확실성
  11. 참조 기반 평가
  12. 참조 없는 평가
  13. 인간 평가
  14. 전문가 평가
  15. 심사 모델 메타평가
  16. 생성 평가
  17. 프로덕션 평가
  18. 회귀 테스트형 평가
  19. 관측성
  20. LLM 평가 계약
  21. 판정 모델 교정 곡선
  22. 평가 예산 배분
  23. 슬라이스 기반 릴리스 게이트
  24. 온라인 평가 드리프트