AncomWiki

ReturnZero 분류 모델 성능 보정 실험 (Day 401)

Properties1
description2022-08-05 기록으로, ReturnZero 프로젝트의 분류 모델 성능을 'question', 'request', 'commitment' 세 가지 클래스로 나누어 평가한 결과입니다. 여러 번의 보정 시도 중 마지막 실험에서 'commitment' 클래스가 F1 점수 0.9365로 가장 높은 성능을 보였으며, 'request' 클래스는 Recall이 낮아 개선이 필요한 것으로 나타납니다.

36 min read

ReturnZero 분류 모델 성능 보정 실험 (Day 401)

Source

  • Field Notes/ReturnZero/Daily Notes/Day 401. 2022-08-05.md

Summary

2022-08-05 기록으로, ReturnZero 프로젝트의 분류 모델 성능을 ‘question’, ‘request’, ‘commitment’ 세 가지 클래스로 나누어 평가한 결과입니다. 여러 번의 보정 시도 중 마지막 실험에서 ‘commitment’ 클래스가 F1 점수 0.9365로 가장 높은 성능을 보였으며, ‘request’ 클래스는 Recall이 낮아 개선이 필요한 것으로 나타납니다.

Key Points

  • 분류 대상: question, request, commitment 세 가지 클래스
  • 최종 실험 결과: commitment 클래스가 Accuracy 0.9658, F1 0.9365로 우수함
  • 개선 필요 영역: request 클래스의 Recall(0.7757)이 상대적으로 낮음
  • question 클래스는 Precision(0.907)과 Recall(0.807)이 균형 잡힌 편

그래프 뷰

백링크