Day 946: YouTube 데이터 파이프라인 실험 및 Worker 테스트 이슈

Source

  • Field Notes/ReturnZero/Daily Notes/Day 946. 2024-02-02.md

Summary

2024-02-02 일기. 주요 작업은 일본어 YouTube 채널(Onomappu)의 오디오 및 자막 다운로드와 전사(Whisper 등) 파이프라인 실행이었다. 실행 결과, 최종 rtboost 메타데이터 생성 실패 및 parsed srt CER 문제 발생. 또한 worker pytest 에서 데이터프레임 변환 이상 현상이 관찰되었으나, health test 데이터 변경은 보류하기로 결정함.

Key Points

  • 일본어 YouTube 콘텐츠 다운로드 및 전사 파이프라인 실행 (Onomappu 채널)
  • 파이프라인 실행 결과: rtboost 메타데이터 미생성, parsed srt CER 이슈 발생
  • Worker pytest 에서 df 변환 이상 현상 확인
  • Health test 데이터는 변경하지 않기로 결론