Pronaia 온프레미스 세미나 준비 및 데이터 파이프라인 문제 해결

Source

• Field Notes/ReturnZero/Daily Notes/Day 1006. 2024-04-02.md

Summary

Pronaia 온프레미스 세미나 준비 과정에서 대용량 오디오 데이터 전사(Whisper) 및 rtboost/pysommers 데이터셋 구축 시 발생한 기술적 장애(VAD 처리 지연, 디렉토리 구조 호환성)를 해결하기 위한 실험과 대안 모색 과정을 기록한 일지입니다.

Key Points

• 대용량 오디오(약 10,731 시간) 전사 작업 중 프로세스 종료 이슈 발생, 기존 결과물 활용 결정
• rtboost 데이터셋 빌더의 디렉토리 구조(test/train 구분) 제한으로 인해 개별 생성 후 pysommers 기반 합치기로 전환
• 대용량 파일(590MB) 처리 시 VAD 속도 저하 문제 발생, 파일 분할(20초 단위) 또는 group_record 옵션 활용 검토
• 일본어 얼라인 데이터의 문장부호 처리 및 CTM 복구 작업 진행

Related

• RTBoost Dataset VAD 오류 및 전처리 파이프라인 수정

• 일본어 데이터셋 구축 및 전사 파이프라인 디버깅

• 2025-01-06 업무 일지: 일본어 음성 데이터 소스 비교 및 파이프라인 이슈

• Day 1055: 전사 품질 필터링 및 Triton E2E 디코딩 오류 분석

• BMT Pronaia VAD 오류 해결 및 seq2seq 학습 기록

• 3i4k VTS 데이터 전처리 및 BMT 음성 전사 이슈

• 프로나이아 프로젝트 및 인프라 운영 일지 (Day 1287)

• 프로나이아 모델 배포 및 스마트 어터런스 처리 로직 설계

• 음성 데이터 전사 및 변환 작업 현황 (2024-05-22)

• 일본어 음성 전사 파이프라인 설계 및 고려사항

• BMT 평가 파이프라인 디버깅 및 데이터 처리 이슈

• ReturnZero E2E 파이프라인 실행 순서 및 데이터 구조 분석

• PRONAIA BMT 서비스 배포 및 테스트 데이터 준비 현황

• 일본어 ASR 파이프라인 구축 및 Forced Alignment 문제 해결 시도

• ReturnZero Day 814: 일본어 모델 학습 속도 문제 및 해결

• 유튜브 자막 전사 데이터 손실 및 저장소 오류

• 일본어 qoo10 음성 전사 및 정렬 문제 해결 시도

• Day 946: YouTube 데이터 파이프라인 실험 및 Worker 테스트 이슈

• 일본어 데이터 정제 및 전처리 파이프라인 (Day 1562)

• 일본어 Pronaia 배포 및 ITN 파이프라인 실험

• Qoo10 일본어 ASR 파이프라인 및 엔진 성능 테스트 (Day 797)

• PRONAIA 엔진 ITN 파이프라인 오류 (FstOpError)

• 일본어 ASR 파이프라인 설정 및 실험 기록

• ReturnZero 데이터셋 전처리 및 pysommers 파이프라인 디버깅

• 미래에셋 방문 및 일본어 데이터 준비 작업

• 맞춤법 검사 자동화 봇 및 데이터 파싱 로직

• BMT 엔진 벤치마크 오류 및 Helm 템플릿 수정

• 2022-06-10: BMT CER 변동 조사 및 Action Item Detection 서베이

• pysommers 데이터셋 전사 및 파일 매핑 작업 (2024-04-17)

• 일본어 ASR 모델 실험 및 데이터 파이프라인 개선 (Day 811)

• Pysommers BMT CER 계산 및 화자 구분 세미나 노트

• Parquet 오디오 데이터 추출 및 전처리 스크립트

• 압축 이슈 해결

• 아서의 튜토리얼 - bmt 사용법

• 일본어 ITN 테스트 및 데이터 문제 확인

• Timbel 전사 속도 최적화: VAD Trailing Time 조정

• 프로나이아(Pronaia) 전사 요약 기능 개발 및 Kubespray 정리

• 다듬이: 텍스트 처리 파이프라인 성능 최적화 및 병렬화 실험

• ReturnZero Day 1118: 음성 인식 전사 오류 및 WFST 디코더 호환성 문제

• Day 1015: 음성 전처리 교정 및 LLM 임베딩 학습

• 말 25 마리 중 최속 3 선 찾기 문제 (구글 면접)

• VAD Dynamic Length 및 E2E ASR Config 변경 사항

• 다듬이 올인: 문장 처리 파이프라인 및 말풍선 병합 로직 설계

• 리팩토링 시도: cdrewrite 및 transducer 기반 태그 삽입 성능 문제

• 다듬이: Turn 기반 처리 파이프라인 재설계 및 Pandas 인덱스 문제

• ASR 성능 데이터

• MWW VAD 임계값 수정 및 테스트

• VAD 임계값이 이름 학습 모델 성능에 미치는 영향 실험

• ReturnZero Day 958: 한자 인식 성능 평가 및 VAD 파라미터 튜닝

• 일본어 가타카나 인식에서 음절 절단 문제 분석

• 음성 언어 식별 모델 평가 및 VAD 개발 계획

• VTS201020 데이터셋의 압축 포맷 및 배치 크기에 따른 CER 불안정성 분석

• VAD 임계값 튜닝 및 성능 평가 (2023-12-07)

• 다듬이: 음성 텍스트 전처리 로직 개선

• CPU VAD 모델 웜업(Warmup) 및 TensorRT 최적화 실험 결과

• Qoo10 전사 오류 원인 분석 및 카타카나 모델 벤치마크

• Stock Trader 데이터 준비 및 아키텍처 검토

• 2023-08-22 작업 일지: 일본어 데이터 전처리 및 Pronaia 테스트 환경 구축

• Engine 코드 수정 및 검증 (2024-12-27)

• ReturnZero Day 640: 텍스트 처리 파이프라인 리팩토링 및 세그멘테이션 이슈

• 2024-07-19 ASR 모델 벤치마크 결과 (Alphanumeric)

• ReturnZero Day 594: 일본어 데이터 파이프라인 및 ITN 아키텍처 검토

• Pronaia Engine Keyword Boosting 모델 전사 테스트 및 배포 준비

• ITN: 텍스트 토크나이징 및 인퍼런스 파이프라인 개선

• dadumi 버그 수정 및 Pronaia API 구조 분석

• RTFx 벤치마크 결과 (2023-10-09)

• ReturnZero Day 1058: ASR 파이프라인 진행 상황 및 버그 수정

• 3i4k 모델 성능 저하 분석 및 Pronaia 클라이언트 개발 현황

• Triton 이미지 교체 및 Pronaia Engine 배포 작업

• 일본어 ASR 데이터 전처리 및 Pronaia 메시지 구조 정의

• 일본어 NLP 파이프라인 및 데이터셋 전처리 작업 기록

• 일본어 데이터 전사 비교 및 정규화 로직 수정

• Day 610: 태스크 정리 (NLP4STT, 다듬이, 일본어 데이터)

• ITN Triton 통합 배포 및 스레드 풀 문제

• 일본어 ASR 얼라인 및 ITN 파이프라인 개발 (Day 635)

• ReturnZero Day 1041: 일본어 STT 데이터 전처리 및 학습 전략

• MWW-TMN 배포 및 인프라 문제 해결 (2025-10-21)

• 일어 음성 처리 파이프라인 디버깅 및 ITN 수정

• 일본어 NLP 파이프라인 디버깅 및 코퍼스 구축

• 일본어 음성 인식(ASR) 전사 파이프라인 디버깅 및 경량화 시도

• Day 1143: 업무 및 기술적 문제 해결 기록

• 한국어 모델 업데이트 및 ITN 테스트 환경 준비

• ITN 모델 최적화 및 데이터 전처리 작업 기록

• 한국어 배포 준비

• 다듬이: 일본어 ITN 및 배포 준비

• 일본어 ASR 파인튜닝 준비 및 코드 수정

• Day 942: vito-worker 배포 및 STT 파이프라인 설정

• ASR 전사 결과 평가용 프롬프트 영문화 및 간소화

• 금융상품 데이터 레거시 문제 및 ChatGPT 온프레미스 도입 필요성

• rt-gec 토크나이저 이슈 및 일본어 ITN 학습 데이터 가이드라인

• ReturnZero Day 359: Python Client 완료 및 3i4k 데이터 FP 검증 시작

• Project-K 지역락 이슈 및 모델 이미지 재퍼블리시

• Trt) 시도 및 실패 기록

• Istio iptables 초기화 오류 해결 및 BMT 테스트 실행

• Kiwi 형태소 분석기 학습 데이터 확보 및 일본어 ITN 개발 현황

• 일본어 이름 모델 검증 및 T4 배포 준비

• MWW 배포 및 ASR 파이프라인 디버깅 (2024-03-12)

• 일본어 NLP 데이터 정제 및 운영 라이선스 발급

• 2025-10-16 업무: 일본어 STT 실험 및 KISA 프로젝트 준비

• 일본어 ASR 모델 (Cutoff) 벤치마킹 및 배포 준비

• 맞춤법 데이터 구조 및 토크나이징 전략 논의

• 일본어 주소 인식 시스템 개선 및 데이터 파이프라인 전략

• BLS 구현 및 배포 준비 (Day 694)

• 이메일 인코딩 문제 해결 시도 (2021-08-13)

• FastAPI 학습

• ReturnZero Day 1622: STT 파이프라인 개선 및 배포 인프라 작업

• 일본어 음성 인식 파인튜닝: 문자셋 재정의 및 데이터 혼합 비율 조정

• 일본어 데이터 전사 이슈 및 두나무 로깅 아키텍처

• 2023-03-04 작업 진행 사항 (NLP4STT, 일본어 데이터셋, rt-dadumi)

• dadumi lang 포함

• 일본어 STT 모델 배포 준비 및 성능 평가 (Day 838)

• 일본어 ASR 모델 학습 및 데이터 전처리 진행 상황 (2024-07-15)

• Qoo10 데이터 정규화 및 장애 대응 기록

• 폰 데이터 이전 및 정리 체크리스트

• 일본어 데이터 전처리 및 ITN 방침 (Day 623)

• ASR-ITN 파이프라인 최적화 및 재학습 전략 논의

• Pronaia Engine 필터링 및 아키텍처 도식화 (Day 1044)

• Conformer 모델 앙상블 및 BLS 통합 실험 (Day 910)

• ASR 모델 성능 평가 결과 (2023-10-02)

• ReturnZero Day 1047: 일본어 ASR 모델 검증 및 성능 분석

• Day 937: 다드미 버그 수정, 일본어 데이터 수집, 특허 보완

• 일본어 Cutoff 모델 배포 준비 및 Partial 응답 속도 검증

• Day 897: E2E 테스트, 데이터 증강 및 LM 적용 논의

• 2024-11-27 작업 기록: 일본어 BMT 실험 및 Pronaia 서버 리팩토링

• 가독성 개선

• 일본어 TTS 데이터 전처리 및 학습 구성안

• SommersV4 Transcribe 파이프라인 분석 및 DevOps 이슈

• Envoy 로드밸런싱 문제 해결

• 주소 교정 (Address Correction)

• Alignment 설명

• 다듬이: 단어 정렬 및 매핑 알고리즘 개선

• 일본어 주소 인식 시스템 개선 및 데이터 파이프라인 전략

• ReturnZero 일본어 배포 및 문서 수정 (Day 1545)

• 2026-01-19 업무: 제로원 TTS 데이터 파이프라인 및 일본어 ASR 모델 개선

• Triton Custom Backend 세미나 준비 및 GoP Decoder 정리

• RTZR STT 서비스 K8s 네트워킹 문제 해결

• Kiwi NLP 모델 빌딩 및 데이터 전처리 작업 기록

• 일본어 데이터 전처리 및 정제 규칙 (Day 790)

• Triton 서비스 확장 및 Helm Chart 문제

• Triton 배포 및 모델 컴파일 파이프라인 정리 (Day 576)

• Greedy Confidence 및 Entropy 기반 신뢰도 추론 아키텍처

• mel2vec 영숫자 인식 성능 검증 및 패딩 실험 결과

• ReturnZero Day 903: 모델 최적화 시도 및 성능 벤치마크

• ReturnZero Day 860: STT 모델 수정 및 성능 벤치마크

• Confidence 구현

• T4 빌드 및 일본어 NLP 처리 방안

• ReturnZero Day 495: 화자 분리 실패와 룰 기반 FP 감수

• ReturnZero Day 482: 비즈니스 통화 스크립트 검토 및 결과 비교 실험

• ASR 성능 벤치마크 및 SER 이슈 분석 (2024-07-18)

• 일본어 음성 인식 모델 테스트 결과 (2024-04-15)

• 2022-12-13 작업 기록: NLP 파이프라인 디버깅 및 일본어 ITN 통합

• Pronaia Online 서비스 운영 및 리소스 모니터링

• 일본어 개발계 배포 준비 및 장애 대응

• 2023-07-05 작업 계획 및 MWW 연동 이슈 해결

• 2024-01-03 할 일: T4 변환 및 성능 평가

• Whisper Dadumi 대응 및 언어 정보 처리

• ReturnZero Day 837: 일본어 ASR 평가 및 엔진 개발

• 2023-08-08 작업 일지: 일본어 학습, MWW 배포, Dadumi

• 일본어 ASR 모델 디버깅 및 성능 비교 (Day 704)

• ITN 수정 및 토크나이징 성능 최적화 고민

• 일본어 주소 인식 시스템 개선 및 데이터 파이프라인 전략

• Gemma2 기술 검토

• Callabo STT 성능 개선 및 일본어 Qoo10 데이터 얼라인 전략

• Triton-Kaldi ASR 파이프라인 개선 및 스트레스 테스트 계획

• 2026-01-26 업무: 제로원 준비 및 일본어 ASR 개선

• 다드미 배포 논의: Align 알고리즘 병목 및 버그 분석

• Recall) 이해 및 HuggingFace Transformers 학습 코드 분석

• 2024-11-28 업무 및 실험 기록

• ReturnZero Day 1061: STT 엔지니어링 및 평가 현황

• Excalidraw Drawing (2026-01-01)

• Day 750: Helm Chart, Pronaia Proxy Logic, and Docker Build Tasks

• ITN 파이프라인 통합 및 일본어 정규화 작업 현황 (Day 602)

• ITN 규칙 대응 및 Kiwi 기반 NLP 파이프라인 개선

• 3i4k 데이터 정제 전략 및 SAC 프로젝트 아키텍처 정의

• MWW EKS 환경 접속 및 배포 준비 (Day 1153)

• 현택의 블록체인 기반 데이터 거래 모델 고찰

• Day 727: vitoworker 테스트 복구 및 PoC 준비

• TED 일본어 데이터셋(테스트용)

• 일본어 ASR 실험 및 Utterance Segmenter 개발 현황

• ReturnZero Day 686: 큐 병목 및 Worker 성능 저하 대응

• 일본어 처리 이슈

• 2023-03-23 작업 기록: 일본어 ITN 및 Qoo10 ASR 정렬

• 일본어 ITN 서비스 배포 및 테스트 진행 상황

• 회의록 요약(Action Item 추출) 연구 서베이 및 난점 분석

• ReturnZero 분류 모델 성능 보정 실험 (Day 401)

• 프로나이아 패키지화 및 3i4k FP 검증

• NLP 팀 회의 및 다음 작업 아이템 (2022-05-12)

• Day 1104 (2024-07-09) - ReturnZero Daily Note

• Day 1022 (2024-04-18) - ReturnZero Daily Note

• polyglot-ko 서빙 준비도

• 2023-01-05 일지: pysommers 배포 문제 해결, NLP4STT 띄어쓰기 모델 최적화 및 사업계획

• GOP 프로젝트: ivector 문제 탐색 및 도커 배포 준비 (Day 299)

• 제한 테스트

• Day 904: STT 학습 기능 논의 및 배포 준비 (2023-12-21)

• Day 902: Audio Feature Extraction & Model Check

• 일본어 STT 개발계 배포 및 벤치마크 실행 기록 (Day 872)

• ReturnZero Day 858: Confidence Score 적용 및 모델 변경

• 단위별 Confidence 및 Entropy 계산 로직 정립

• Day 820. 2023-09-28

• ASR 파싱 및 인프라 요구사항 (Day 791)

• 통합 ITN 및 S2 Phase 1 진행 상황 (2023-06-05)

• Qoo10 rtboost 구현 및 dadumi aligner 알고리즘 설계 고민

• 2023-02-24 작업 기록: 일본어 STT 조사 및 통합 ITN 설계

• Day 536. 2022-12-18

• ReturnZero Day 532: Kiwi 모델 검증 및 일본어 숫자 태깅 규칙 분석

• Day 212. 2022-01-28

• Day 1105. 2024-07-10

• 인프라 구축 현황

• RLLib 얼라인: 학습 코드 검토 및 Google Trends 데이터 검증

• NLP 문제 정의

• Kiwi 형태소 분석기 모델 학습 및 데이터 변환 프로세스

• TTS 모델 개선 및 제로원 준비

• 2026-01-20 업무: 제로원 TTS 데이터 정제 및 일본어 STT 모델 배포 가이드

• 2026-01-14 업무 및 일본어 모델 배포 준비

• Pronaia STT 환경 설정 및 특허 미팅 기록 (Day 917)

• 일본어 데이터셋 평가 및 온프레미스 환경 설정

• BMT 모델 테스트 및 인프라 설정 (2024-01-05)

• 2023-09-07 작업 기록: 일본어 ASR 모델 학습 및 MWW 업무

• qoo10 일본어 서버 재가동 및 헬름차트 설정

• 2023-05-12 일본어 모델 학습 및 얼라인, ITN 서비스화 진행 상황

• ITN 성능 벤치마크 및 토큰화 버그 분석

• 맞춤법 봇: 띄어쓰기 교정 로직 및 API 테스트

• Day 335. 2022-05-31

• 안정성 문제 해결

• 2025-09-16 일본어 모델 배포 및 설정 작업

• 일본어 STT 모델 벤치마킹 및 인프라 작업 기록 (2025-01-14)

• VITO 요약 회의 및 RoBERTa 의도 분석 모델 논의

• Day 1106. 2024-07-11 업무 요약

• Day 1009: 팀벨 레이턴시 이슈 및 일본어 E2E 세그멘테이션

• MWW 일본어 주소 모델 성능 개선 및 WFS 문제 진단

• 팀벨 개발 환경 설정 및 SIMS 배포 준비 (Day 959)

• 2026-02-02 업무: 일본어 ASR 모델 개선 및 제로원 데이터 처리

• 2026-01-29 업무: 일본어 ASR 모델 개선 및 제로원 데이터 이슈

• Day 425: 환경 설정 문제 및 하이라이터 프로젝트 방향성

• TTS 연구 파이프라인 정의 및 Project-K 협업 회고

• SIMS 헬름 구성 및 파이프라인 자동화 고민

• 신한은행 인프라 연동 및 라벨링 파이프라인 논의

• 주소 인식 모델 (Address Model) 성능 분석 및 트러블슈팅

• Vocab 실험 및 작업량 분석

• Pronaia-Engine 코드 폴리싱 및 Triton Mel 성능 검증

• T4 GPU 환경에서 WFST 모델의 성능 측정 (Day 876)

• Day 875. 2023-11-23

• ReturnZero Day 832: 일본어 인식 실험 및 Prefix Decoder 평가

• 일본어 ASR 모델 평가 및 rt-itn 배포 기록

• 일본어 TTS 기반 학습 및 주소 전사 실험 노트

• ITN 개발 및 에이전트 아키텍처 논의 (Day 680)

• CTC Align 실패 현상 및 대안 탐색 (Day 672)

• 다듬이 및 일본어 모델 처리 논의 (Day 642)

• 일본어 STT 이슈

• Day 61 (2021-08-30) - ReturnZero 일지

• 통합 ITN(다듬이) 아키텍처 및 프로젝트 현황

• Python Client 초기 배포 및 구조 검토 (Day 358)

• 3i4k 모델 검증 및 VTS 테스트셋 평가 전략

• Day 323. 2022-05-19

• ReturnZero Day 291: gRPC 로직 및 Ali-phone 정렬 디버깅

• Day 1036: 상태 확인 및 기술적 장애물

• ReturnZero Day 79: 인프라 설정 복구 시도 및 일감 데이터 쿼리

• 현대캐피탈 Numberplate 모델 장애 진단 및 일본어 T4 모델 준비

• gRPC Insecure 연결 문제 및 STT API 통합 문의

• Primary Voice Isolation (PVI) 파이프라인 개선 및 일본어 ASR 모델 이슈

• 주소 인식 모델 서빙 방식 결정: ONNX Dynamic vs TRT

• ReturnZero Day 764: 헬름차트 변경 및 배치 처리 아키텍처 논의

• Day 699: dadumi 배포 및 일본어 ASR 평가

• ITN 성능 시험 및 VAD 통합 테스트 진행 (Day 667)

• Day 657: Vito Worker 배포 및 rt-neural-itn Torch 의존성 제거

• 일본어 ASR 프로젝트 현황 및 전략 논의 (Day 627)

• 띄어쓰기 모델 변환 및 성능 테스트

• NLP4STT 점검: ITN, TER 메트릭 및 테스트셋 구축

• ITN 이슈: CTM 정보 복구

• Day 372 (2022-07-07) 작업 기록

• Day 303: 모델 이미지 재배포 및 TTS 연구 시작

• PVI 성능 개선 및 일본어 ASR 모델 이슈 분석

• ReturnZero Day 1147: AM 모델 학습 API 테스트

• MWW 일본어 배포 및 가독성 평가 실험 (2024-07-24)

• 전처리 이슈

• 2026-01-21 업무: 제로원 TTS 데이터 정제 실패 및 일본어 STT 모델 개선 계획

• Istio 네트워크 문제 조사

• ITN 개선 및 제로원 착수 준비

• KISA 프로젝트 준비 및 일본어 STT 모델 실험 (Day 1570)

• Triton 서버 구축 및 pysommers 데이터 전처리

• Day 844. 2023-10-23

• 일본어 ASR 모델 성능 벤치마크 및 문제점 (2023-09-25)

• 일본어 NLP 화이트리스트 및 배포 기록

• ITN 서비스 배포 및 VAD 통합 구성 검토

• ITN 성능 병목 분석 및 일본어 전사 개선 방향

• 일본어 ASR 모델 훈련 성능 저하 관찰 (Day 1571)

• 2025-09-23 업무: 일본어 배포 및 서울소방 로그 분석

• 일본어 코드모델 (파나소닉 모델명 인식)

• GPT-SoVITS 감정 표현의 무작위성 및 Gemini 3 평가

• 데이터 전략 논의 (Day 845)

• Triton GPU OOM 문제 및 팀 전환 초기 적응

• 삼성 SW 검정 프로페셔널 준비 및 재원 형과의 대화

• Triton Export 및 버전 호환성 문제

• MLOps 인프라 및 데이터 과학 공정 현황 (Day 251)

• ReturnZero Day 1623: STT 파이프라인 개선 및 인프라 자동화

• 현대캐피탈 차량번호 인식 모델 고도화 및 데이터 필터링

• License Proxy 기술 검토

• ITN 배포용 메트릭 설정 및 K8s 테스트베드 구축

• Day 800: 세팅 및 ITN 워커 스펙 변경

• 일본어 철자전사 Align 및 신한은행 프로젝트 Kickoff

• 일본어 ASR 모델 성능 검증 및 디버깅 (Day 708)

• Day 693. 2023-05-24

• ITN 논의

• rt-dadumi: 타임스탬프 복구 및 세그먼트 처리 로직

• 긴 입력 처리 아키텍처 검토 (Day 586)

• Total ensemble model

• pysommers 개발 진행 상황 및 반성 (2023-01-03)

• ITN-JP 숫자 변환 및 테스트셋 구축 (Day 535)

• 일본어 숫자 및 날짜 처리 로직 개선 (Day 533)

• 일본어 ITN 포팅 착수 및 띄어쓰기 복원 알고리즘 고민

• Day 497. 2022-11-09

• Day 491: E2E 음성 인식 서버 배포 장애 및 Kaldi 대체안 검토

• Day 365: VTS Trial 실험 결과 및 SAC 킥오프

• Day 301. 2022-04-27

• Day 187. 2022-01-03

• 2024-12-03 작업 일지: 시스템 튜닝 및 배포

• Day 1043: PII Redaction Filter 개발 및 On-Prem 모델 관리

• dadumi-whisper 파이프라인 개선 및 현대캐피탈 업무

• Triton-Kaldi 보고 및 CER 준비 (Day 236)

• Triton-Kaldi 오프라인 디코딩 및 Sommers 데이터셋 연동 문제

• 2025-08-29 업무: 현대캐피탈 고도화 및 일본어 SIMS 배포 준비

• Day 901. 2023-12-18

• 2023 년 1 월~12 월 업무 회고 및 일본어 ITN 개발 이력

• 새 일본어 고객 (Day 786)

• 워커 3단 배포 전략 및 차트 개발 현황

• NLP4STT: ITN 및 띄어쓰기 후처리 개선

• Triton Inference Server 앙상블 배치 처리 검증

• Day 461. 2022-10-04

• Day 331. 2022-05-27

• ASR 방향성 회의 및 3i4k 환경 구축 삽질

• gip-decoder 배포 및 TTS 아키텍처 검토

• 2026-04-22 업무: PVI, 일본어 ASR 개선 및 Silero VAD 평가

• ReturnZero Day 1756: PVI 및 일본어 ASR 개선 이슈

• 2026-01-23 업무: 제로원 집중 및 일본어 STT 개선

• SIMS 모델 배포 및 게이트웨이 설정 작업

• 팩맨TF 및 dadumi-worker 아키텍처 리팩토링 고려사항

• 2024-09-19 업무: 일본어 STT 모델 튜닝 및 Prefix Decoder 디버깅

• 2024-07-22 업무 및 회고: 일본어 ASR 모델 평가 및 인프라 구축

• 2024-07-21: ONNX 배포 실패 및 반기 회고

• AWS CLI 환경 설정 및 Triton Server 배포 준비

• GOP 디코더 디버깅: iVector 차원 불일치 문제

• Day 950: PTQ 세미나 및 작업 진행 상황

• 일본어 Neural ITN 및 4090 환경 빌드 시도

• Homura-Dan 라이센스 서버 아키텍처 및 RTFx 성능 벤치마크

• Day 665: ITN 모델 배포 장애 및 환경 정리

• Day 589. 2023-02-09

• 일본어 ITN(숫자 읽기) 디버깅 및 워커 개발

• Kiwi 모델 빌더 세그먼트 폴트 디버깅 및 ITN 초기 조사

• 2022-11-21 작업 기록: 한글 교정 로직 수정 및 Highlighter PoC 환경 설정

• ReturnZero Day 1765: PVI 및 일본어 ASR 모델 개선 현황

• S2 리빌드 및 일본어 ASR 모델 개선 현황 (2026-03-16)

• 2025-01-17 업무: 일본어 STT 벤치마크 및 VAD 튜닝

• 일본어 프로젝트 진행 상황

• 일본어 주소 인식 모델 배포 및 MWW STT 성능 검증

• 팀벨(Timbel) 평가(Eval) 시스템 디버깅 및 인프라 설정

• Day 1042 작업 기록: 데이터셋, MWW 버그, 인프라

• Triton Server 기반 Kaldi ASR 배포 시도 및 환경 문제

• 2024 Q1 OKR 초안: 신한은행 이관 및 포스코 데이터 테스트

• Composite rule: 해시 검증의 한계와 조합 폭발 문제

• rtzr-stt 파이프라인 개선 및 STT 인식 오류 분석 (2025-11-12)

• Pronaia Multilang 배포 디버깅 및 utterance_save 암호화 구현

• IoE 해카톤 준비

• Day 852: 현대캐피탈 방문 및 use_vad_event 배포 준비

• mww 운영계 배포 아키텍처 및 구성 요소

• dadumi한테 어떻게 task를 줄건데

• 일본어 관련 의심 단어 목록 및 정제 규칙

• 대방 방문 작업 목록 및 기술적 이슈 (2023-08-16)

• 일본어 데이터셋 전환 및 Quota 서비스 로직 수정

• 2023-07-31 일일 작업 기록 및 장애 대응

• 2023-07-27 작업 계획: 일본어 모델 배포 및 Triton 설정

• 다듬이 마무리 (Day 702)

• fp16 테스트 실패 및 배포 작업 기록

• ReturnZero Day 582: 워크플로우 연동 및 Triton 배포 계획

• NLP4STT: Neural ITN Triton화 및 배치 처리

• Neural-ITN TensorRT 배포 시도 및 한계

• GEC 모델 ONNX 변환 및 NLP4STT 진행 상황

• Triton Custom Backend 학습 계획 및 모델 웜업 개념 정리

• Day 300: 도커 배포, ivector 디버깅, gRPC 타임아웃 이슈

• ReturnZero Day 1785: PVI, 일본어 ASR 개선 및 MWW 배포

• 2026-05-14 업무 및 기술 이슈 요약

• 2026-04-23 업무: PVI 및 일본어 ASR 개선

• Primary Voice Isolation(PVI) 및 일본어 ASR 개선 현황

• TTS 모델 개선 및 S2 리빌드

• 2026-01-27 업무: 제로원 TTS, 일본어 ASR 개선, 두나무 유지보수

• 2025-10-13 업무: 일본어 STT 모델 검증 및 제로원 제안서 초안

• 배포 테스트 (2024-09-11)

• TMN 회의: 일본어 4자리 숫자 인식 오류 분석

• 멀티뷰 학습 및 vLLM 서빙 엔진 탐색

• 한중일 한자 발음 매핑 및 데이터베이스 구축 구상

• 처리 워크플로우

• S2 리빌드 및 스택빌더 이슈 해결

• rt-tokenizer CLI 구현 및 백엔드 디토크나이징 파이프라인 적용

• 학습 파이프라인 개선

• Day 995. 2024-03-22

• MWW 한국어 STT 배포 및 SIMS Backend 아키텍처 검토

• 일본어 TMN 회의 및 팀벨 클러스터 작업

• Day 8. 2021-07-08

• 다듬이 (Day 663)

• Triton Ensemble 구현 및 NLP4STT 띄어쓰기 이슈

• Day 555: ONNX 모델 배포 및 환경 구성 고민

• NLP4STT: ITN 평가 메트릭 및 pysommers 의존성 고민

• Day 428. 2022-09-01

• 2022-06-20 워크샵 및 모델 실험 기록

• Day 285. 2022-04-11

• PVI 및 일본어 ASR 모델 개선 현황 (2026-05-22)

• Primary Voice Isolation (PVI) 성능 평가 및 일본어 ASR 개선 계획

• ReturnZero Day 1743: PVI, 일본어 ASR 개선 및 신한 SDK 빌드

• Primary Voice Isolation 및 일본어 ASR 개선 과제

• S2 리빌드 문서화 및 일본어 STT 모델 개선 과제

• TTS 개선 및 S2 리빌드

• 2025-10-15 업무 및 일본어 ASR 모델 평가

• 일본어 STT 모델 튜닝 및 팀벨 서비스 장애 대응

• MWW EKS 배포 장애 및 STT 모델 평가 이슈 (Day 1168)

• 팀벨 (2024-03-28)

• 프로나이아(Pronaia) 일본 배포 및 API 접근 제어 아키텍처 논의

• 신한카드 K8s 방화벽 설정 및 모델 파이프라인 개선 고민

• 2026-01-30 업무: 일본어 ASR 개선, 제로원 데이터 처리, 두나무 인프라 이슈

• Day 282. 2022-04-08: GRPC 컴파일 시도 및 GoPRequest 파이프라인 설계

• gRPC 서버 구현 및 iVector 추출 파이프라인 분석 (2022-04-07)

• 신한카드 프로젝트: 온프레미스 인프라 및 SRE 운영 현황

• MWW 배포 회고 및 테스트 데이터셋 구성 전략

• Day 931. 2024-01-18

• 주소 인식 모델 성능 검증 및 Triton 배포 전략

• 오전 업무 스몰토크 (Day 597)

• Day 588: 띄어쓰기 교정 실험 및 KAIST 채용 심사 기록

• BERT 모델의 ONNX 변환 및 Triton Server 배포 시도 (Day 559)

• SetFit 제로샷 분류 실험 및 ReturnZero 현황 (Day 545)

• 2022-12-26 회사 근황 및 NLP 기술 검토

• Day 203: Sommers Dataset Testing & Detokenization Issues

• 2026-05-21 업무: PVI 및 일본어 ASR 모델 개선 현황

• PVI 모델 개선 및 일본어 ASR 이슈 분석

• 2026-05-15 업무: PVI, 일본어 ASR, MWW 배포 이슈

• PVI 성능 최적화 및 일본어 ASR 모델 개선 현황

• S2 리빌드 및 일본어 ASR 모델 개선 현황 (2026-03-13)

• 2026-01-15 업무 및 일본어 ASR 개선 계획

• 2025-11-05 업무: 오뚜기 모델 평가 및 L40S Whisper 일본어 성능 검증

• Day 14. 2021-07-14

• SIMS 0.4.0 배포 시험 및 설정 검토

• MWW EKS 인프라 설정 및 API 테스트 기록

• PII 영향 분석)

• Day 1. 2021-07-01

• 2023-08-28 일일 작업 기록: 일본어 데이터 분석, 현대캐피탈 장애 대응, GPU Operator 설치

• MWW K8s Batch Cronjob 해제 및 현대캐피탈 방문 준비

• 출력 파이프라인 정리 및 Protobuf 정의 시도

• Day 125: 쿠폰함 구현 및 DB 연결 문제 해결

• Day 72 (2021-09-10): 휴가 및 VA-589 작업, 세미나 준비

• 2025-09-08 업무: 일본어 SIMS 배포 및 현대캐피탈 고도화 준비

• FreqAI 설정 및 커스텀 데이터 활용 가능성 탐구

• 2025-07-11 업무 진행 상황 (RAPA, 현대캐피탈, Pronaia)

• MWW 한국어 SIMS 평가 및 커넥션 릭 재현 테스트

• Day 966. 2024-02-22

• 테스트 진행 상황 (Day 965)

• STT 성능 벤치마킹 및 특허 기술 아이디어 정리

• MWW 한국어 개발계 배포 및 기술적 장애 대응 (2023-11-15)

• Triton Server 헬름 차트 배포 및 모델 로딩 오류

• NeuralITN TRT 변환 성공 및 Triton 포팅 과정

• CD 및 Transcriber 최적화 진행 상황

• 프로젝트 Bled 중단 및 SAC 프로젝트 집중

• 2022-05-18 일일 작업 기록: 서베이 및 배포 프로세스 개선 논의

• ReturnZero Day 1749: PVI 및 일본어 ASR 개선 작업

• ReturnZero Day 1745: PVI, 일본어 ASR 개선 및 Kubernetes 보안 검토

• Primary Voice Isolation(PVI) 및 신한은행 다국어 ASR 대응 현황

• S2 리빌드 및 일본어 ASR 모델 개선 현황 (2026-03-19)

• 2024-11-29 업무 기록: 일본어 모델 개선 및 PII 버그 수정

• ReturnZero Day 1134: 에어갭 환경 구축 및 MWW 오류 대응

• 현대캐피탈 Triton 서버 빌드 및 성능 벤치마크 (Day 1112)

• 2024-05-29 업무 및 기술 작업 기록

• 03 환경 구축 및 모델 데이터 이전

• 현대캐피탈 고도화: 반입 준비, 취약점 스캔, utterance 암호화 구현

• Triton-Kaldi Rescore Lattice Postprocessor 통합 및 빌드 이슈 해결

• 최락권 박사님 세미나: 영상 품질 평가(QA) 및 시각 인지 모델

• Triton-Kaldi GRPC 연결 실패 및 클라이언트 호환성 문제

• 프로나이아 엔진 아키텍처 및 운영 이슈 (Day 715)

• Torch 의존성 제거 및 Triton 이미지 배포 작업 (Day 658)

• rt-dadumi aligner

• AICT 문장 띄어쓰기 벤치마크 및 워커 컨테이너 테스트

• 일본어 ITN (Inverse Text Normalization) 처리 규칙 및 문제점

• 일단 합쳤다가 풀기 (Batch Processing & Async Architecture)

• Day 490. 2022-11-02

• Day 448. 2022-09-21

• 2026-05-28 업무 및 기술 이슈 요약

• ASR 모델 개선 현황: PVI, 일본어, MWW 화물맨

• ReturnZero Day 1762: PVI 및 일본어 ASR 개선 현황

• ReturnZero Day 1748: PVI 및 일본어 ASR 개선 작업

• Primary Voice Isolation(PVI) 평가 환경 구축 및 신한 SDK 16kHz 대응

• S2 리빌드 문서화 및 일본어 STT 모델 개선 과제

• S2 리빌드 문서화 및 다국어 RTFx 측정 환경 구축

• 2026-02-26 업무 일지: 일본어 ASR 개선 및 S2 리빌드

• 2026-01-28 업무: 일본어 ASR 모델 개선 및 데이터셋 구축

• ReturnZero Day 1643: 모델 레지스트리 구조화 및 전사 장애 분석

• 현대캐피탈 차량번호 인식 모델 파인튜닝 및 SIMS 일본어 환경 구축

• 팀벨 프로젝트: 개인정보 필터링 및 서버 구축 작업

• TMN 음성 인식 오류 분석 및 개선 과제 (2024-04-09)

• 기가코리아 개발 회의

• 보고서 수정 및 재구성 작업 목록

• Stable Diffusion 모델 체크포인트 링크

• Day 86: 백준 알고리즘 풀이 및 S-105 데드락 문제 해결 시도

• 현대캐피탈 고도화 운영 준비 및 SIMS 암호화 구현 현황

• 2025-06-30 업무 진행 사항: RAPA 과제 리뷰 준비 및 현대캐피탈 SIMS 고도화

• 2024-12-12 업무 및 신한카드 아이쏠라 배치 준비