AncomWiki

2023-08-08 작업 일지: 일본어 학습, MWW 배포, Dadumi

Properties1
description2023 년 8 월 8 일의 작업 일지로, 일본어 학습 데이터 전처리 (정규화, 디렉토리명 수정), MWW 서비스의 우여곡절 끝에 성공한 배포 (라이선스 서버, Helm 차트, ConfigMap 설정), 그리고 Dadumi 프로젝트의 띄어쓰기 후처리 및 조사 보정 작업에 대한 기록이다.

39 min read

2023-08-08 작업 일지: 일본어 학습, MWW 배포, Dadumi

Source

  • Field Notes/ReturnZero/Daily Notes/Day 769. 2023-08-08.md

Summary

2023 년 8 월 8 일의 작업 일지로, 일본어 학습 데이터 전처리 (정규화, 디렉토리명 수정), MWW 서비스의 우여곡절 끝에 성공한 배포 (라이선스 서버, Helm 차트, ConfigMap 설정), 그리고 Dadumi 프로젝트의 띄어쓰기 후처리 및 조사 보정 작업에 대한 기록이다.

Key Points

  • 일본어 학습: qoo10 데이터의 정규화 및 알파벳/한자/숫자 처리, MWW 학습 데이터 디렉토리명에서 한글 제거 작업 진행
  • MWW 배포: 라이선스 서버 문제 해결 후 Helm 차트 작성 및 ConfigMap 설정을 통해 최종 배포 완료
  • Dadumi: 띄어쓰기 후처리 로직 개선, 잘못 띄어진 단어 보정, 디코딩 시 단어 리스트 활용, 조사 처리 문제점 확인

그래프 뷰

백링크