ESPnet2 pretrained model, Yushi Ueda/ksponspeech_asr_train_asr_conformer8_n_fft512_hop_length256_raw_kr_bpe2309_valid.acc.ave_10best, fs=16k, lang=kr
Creators: name: Ueda, Yushi
Publisher: name: Zenodo
Year: 2021
Subjects: ESPnet
deep-learning
python
pytorch
speech-recognition
speech-synthesis
speech-translation
machine-translation

description: This model was trained by Yushi Ueda using ksponspeech recipe in espnet. <strong>Python API</strong><pre><code class="language-python">See https://github.com/espnet/espnet_model_zoo</code></pre> <strong>Evaluate in the recipe</strong><pre><code class="language-bash">git clone https://github.com/espnet/espnet cd espnet git checkout 4f94f5bdc67b722c7fb04601b3b705d972bbce64 pip install -e . cd egs2/ksponspeech/asr1 ./run.sh --skip_data_prep false --skip_train true --download_model Yushi Ueda/ksponspeech_asr_train_asr_conformer8_n_fft512_hop_length256_raw_kr_bpe2309_valid.acc.ave_10best</code> </pre> <strong>Results</strong><pre><code> # RESULTS ## Environments - date: `Wed Aug 11 16:39:51 EDT 2021` - python version: `3.8.5 (default, Sep 4 2020, 07:30:14) [GCC 7.3.0]` - espnet version: `espnet 0.10.0` - pytorch version: `pytorch 1.8.1+cu102` - Git hash: `4f94f5bdc67b722c7fb04601b3b705d972bbce64` - Commit date: `Fri Aug 6 13:48:44 2021 -0400` ## asr_train_asr_conformer8_n_fft512_hop_length256_raw_kr_bpe2309 ### WER |dataset|Snt|Wrd|Corr|Sub|Del|Ins|Err|S.Err| |---|---|---|---|---|---|---|---|---| |decode_asr_lm_lm_train_lm_transformer3_kr_bpe2309_valid.loss.ave_asr_model_valid.acc.ave_10best/eval_clean|3000|20401|82.8|14.0|3.2|4.1|21.3|59.4| |decode_asr_lm_lm_train_lm_transformer3_kr_bpe2309_valid.loss.ave_asr_model_valid.acc.ave_10best/eval_other|3000|26621|79.6|17.5|2.9|5.5|25.8|72.5| ### CER |dataset|Snt|Wrd|Corr|Sub|Del|Ins|Err|S.Err| |---|---|---|---|---|---|---|---|---| |decode_asr_lm_lm_train_lm_transformer3_kr_bpe2309_valid.loss.ave_asr_model_valid.acc.ave_10best/eval_clean|3000|65475|93.8|3.6|2.5|2.2|8.4|59.4| |decode_asr_lm_lm_train_lm_transformer3_kr_bpe2309_valid.loss.ave_asr_model_valid.acc.ave_10best/eval_other|3000|92640|93.5|4.0|2.5|2.6|9.1|72.5| ### TER |dataset|Snt|Wrd|Corr|Sub|Del|Ins|Err|S.Err| |---|---|---|---|---|---|---|---|---| |decode_asr_lm_lm_train_lm_transformer3_kr_bpe2309_valid.loss.ave_asr_model_valid.acc.ave_10best/eval_clean|3000|68439|94.1|3.5|2.4|2.1|8.0|59.4| |decode_asr_lm_lm_train_lm_transformer3_kr_bpe2309_valid.loss.ave_asr_model_valid.acc.ave_10best/eval_other|3000|95592|93.7|3.8|2.4|2.5|8.7|72.5|</code></pre> <strong>ASR config</strong><pre><code>config: conf/tuning/train_asr_conformer8_n_fft512_hop_length256.yaml print_config: false log_level: INFO dry_run: false iterator_type: sequence output_dir: exp/asr_train_asr_conformer8_n_fft512_hop_length256_raw_kr_bpe2309 ngpu: 1 seed: 0 num_workers: 1 num_att_plot: 3 dist_backend: nccl dist_init_method: env:// dist_world_size: 4 dist_rank: 0 local_rank: 0 dist_master_addr: localhost dist_master_port: 49557 dist_launcher: null multiprocessing_distributed: true unused_parameters: false sharded_ddp: false cudnn_enabled: true cudnn_benchmark: false cudnn_deterministic: true collect_stats: false write_collected_feats: false max_epoch: 35 patience: null val_scheduler_criterion: - valid - loss early_stopping_criterion: - valid - loss - min best_model_criterion: - - valid - acc - max keep_nbest_models: 10 grad_clip: 5.0 grad_clip_type: 2.0 grad_noise: false accum_grad: 1 no_forward_run: false resume: true train_dtype: float32 use_amp: false log_interval: null use_tensorboard: true use_wandb: false wandb_project: null wandb_id: null wandb_entity: null wandb_name: null wandb_model_log_interval: -1 detect_anomaly: false pretrain_path: null init_param: [] ignore_init_mismatch: false freeze_param: [] num_iters_per_epoch: null batch_size: 20 valid_batch_size: null batch_bins: 18000000 valid_batch_bins: null train_shape_file: - exp/asr_stats_raw_kr_bpe2309/train/speech_shape - exp/asr_stats_raw_kr_bpe2309/train/text_shape.bpe valid_shape_file: - exp/asr_stats_raw_kr_bpe2309/valid/speech_shape - exp/asr_stats_raw_kr_bpe2309/valid/text_shape.bpe batch_type: numel valid_batch_type: null fold_length: - 80000 - 150 sort_in_batch: descending sort_batch: descending multiple_iterator: false chunk_length: 500 chunk_shift_ratio: 0.5 num_cache_chunks: 1024 train_data_path_and_name_and_type: - - dump/raw/train/wav.scp - speech - sound - - dump/raw/train/text - text - text valid_data_path_and_name_and_type: - - dump/raw/dev/wav.scp - speech - sound - - dump/raw/dev/text - text - text allow_variable_data_keys: false max_cache_size: 0.0 max_cache_fd: 32 valid_max_cache_size: null optim: adam optim_conf: lr: 0.0002 scheduler: warmuplr scheduler_conf: warmup_steps: 40000 token_list: - - - '[unk]' - ▁ - 이 - 는 - 가 - 지 - 고 - 도 - 에 - 을 - 어 - 서 - 은 - 다 - 를 - 기 - 리 - 로 - 만 - 야 - 나 - 요 - 한 - 해 - 라 - 면 - 대 - 시 - 게 - 스 - 아 - 하 - 인 - 자 - 까 - 데 - 일 - 장 - 랑 - 드 - 주 - 네 - 들 - 긴 - 려 - 사 - 학 - 었 - 구 - 트 - 러 - 던 - 진 - 했 - 수 - 할 - 원 - 았 - 냐 - 년 - 래 - '0' - 치 - 단 - 니 - 보 - 워 - 점 - 의 - 정 - 르 - 마 - 월 - 히 - 분 - 상 - 운 - 으 - 회 - 간 - 식 - 신 - 든 - 영 - 거 - 우 - 부 - 산 - 과 - 크 - 여 - 체 - 관 - 비 - 버 - 명 - 용 - 소 - 날 - 양 - 제 - 미 - 생 - 전 - 였 - 동 - 오 - 화 - 카 - 프 - 길 - 천 - 국 - 방 - 음 - 져 - 물 - 직 - 봤 - 호 - 실 - 세 - 성 - 터 - 금 - 걸 - 행 - 봐 - 디 - 준 - 질 - 짜 - 레 - 새 - 색 - 역 - 목 - 린 - 업 - 티 - 두 - 끼 - 돌 - 케 - 유 - 외 - 문 - 타 - 무 - 약 - 있 - 개 - 났 - 내 - 님 - 통 - 박 - 번 - 느 - 토 - 계 - 선 - 연 - 공 - 복 - 저 - 울 - 둘 - 집 - 난 - 렸 - 줘 - 겠 - 안 - 경 - 머 - 력 - 쪽 - 급 - 매 - 애 - 격 - 차 - 씩 - 키 - 청 - 코 - 적 - 넘 - 와 - 등 - 졌 - 반 - 속 - 당 - 현 - 겨 - 심 - 담 - 파 - '8' - 그 - 말 - 종 - 태 - 모 - 름 - 글 - 튼 - 것 - 능 - 출 - 본 - 순 - 되 - 줬 - 메 - 임 - 강 - 커 - '7' - 달 - 피 - 꾸 - 배 - 란 - 엔 - 플 - 듣 - 건 - 군 - 갈 - 표 - 확 - 민 - 갔 - '9' - 쁘 - 활 - 합 - 맛 - 결 - 럽 - 씨 - 발 - 백 - 쳐 - 육 - 바 - 위 - 취 - 망 - 교 - 십 - 족 - 셨 - 참 - 떨 - '5' - 웃 - 중 - 감 - 쉬 - 근 - 브 - 술 - 페 - 변 - 테 - 릴 - 투 - 별 - 른 - 습 - 즈 - '1' - 증 - 독 - 충 - 짝 - 줄 - 떡 - 뒤 - 휴 - 셔 - 넣 - 절 - 험 - c - 악 - 처 - 루 - 편 - 남 - 패 - 빼 - 언 - 포 - 섯 - 슬 - 특 - 꺼 - 숙 - 살 - 쯤 - 병 - 창 - 겼 - 판 - 죠 - 누 - 형 - 답 - 희 - 입 - 허 - 끔 - 료 - 닐 - 택 - 림 - 각 - 볼 - 풀 - 틀 - 몸 - 필 - 후 - 골 - 없 - 예 - 켜 - 황 - 익 - 베 - 북 - 힘 - 법 - 함 - 꼬 - 랜 - 향 - 석 - 칠 - 환 - 품 - 침 - 혀 - 쓸 - 블 - 먹 - 조 - t - 채 - 욕 - 며 - 맨 - 권 - 검 - 된 - 초 - 잠 - 록 - 때 - 김 - 올 - 넌 - 션 - 깨 - 캐 - 송 - 녀 - 돼 - 탈 - 광 - 론 - 받 - 뽑 - 앞 - 재 - 째 - 접 - 움 - 밤 - 꼭 - 땐 - 작 - 깔 - '3' - 폰 - 멀 - 께 - s - 왔 - 퍼 - 곳 - 잔 - 쉽 - 짐 - 암 - 극 - 련 - 벽 - 헤 - 떠 - 끄 - 착 - 승 - 봉 - 더 - 빨 - 몰 - 촌 - 밥 - 딩 - 껴 - 류 - 뜨 - 못 - 따 - 놨 - 얼 - 궁 - 노 - 너 - 곤 - 논 - 클 - 싼 - 맥 - 팀 - p - 락 - 낫 - 추 - 쁜 - 킨 - 항 - 빌 - 쿠 - 늘 - 찌 - 찾 - 쌤 - 밀 - 돈 - 냈 - 빵 - 딴 - 딸 - 쩌 - 온 - 억 - 슷 - 써 - 걍 - 획 - 씬 - 런 - 응 - 챙 - 범 - 핑 - 쩔 - 팅 - 긍 - '4' - 됐 - 뛰 - 탄 - 층 - 퇴 - 센 - 춰 - 설 - 찬 - 듯 - m - 갑 - '2' - a - 왕 - 뉴 - 텔 - 렌 - 홍 - 탕 - 짓 - 밑 - 헬 - 축 - 존 - 립 - 랐 - 빡 - 곱 - g - '6' - b - 링 - 견 - 같 - v - 낙 - 츠 - 젠 - 맘 - 놔 - 렵 - 철 - 땜 - 갖 - 혼 - 쇼 - 값 - 닭 - 쪼 - 깝 - 텐 - 픈 - 탁 - 쓴 - 농 - 량 - 염 - 불 - 냄 - 척 - 콘 - 겁 - 효 - 규 - 섭 - 꿈 - 톡 - 완 - 곡 - 액 - d - 쎄 - 평 - 먼 - 킹 - 덜 - 훈 - 턴 - 쳤 - 널 - 꿀 - 닌 - 책 - 깜 - 낼 - 롤 - k - 엄 - 총 - 덕 - 렇 - 믄 - 친 - 믿 - 흥 - 롱 - 빠 - 뜻 - 짤 - 쌍 - 닥 - 컨 - 웬 - 엽 - 찰 - 혜 - 꿔 - 뿌 - 뻐 - 낸 - 빈 - 뻔 - 셋 - 즐 - 튀 - 겹 - 득 - 끌 - 람 - 막 - 졸 - 녹 - 잡 - 푸 - 쭉 - 싱 - 깐 - 팬 - o - 념 - 열 - i - n - 솔 - 귀 - 릭 - 쟁 - 뀌 - 켓 - 털 - r - 벌 - 풍 - 웨 - 땡 - 롯 - 롭 - 멘 - 넓 - 칼 - 냉 - 빙 - 뿐 - 잉 - 젤 - 죄 - 탔 - 떼 - 홀 - 샤 - 럴 - 줌 - 엑 - 징 - l - 폭 - 딜 - 슈 - 율 - 킬 - 굴 - 즌 - 씀 - 냥 - 똑 - 앙 - 콩 - 컴 - 닝 - 싸 - 옆 - 꽃 - 쌀 - 컬 - 춤 - 슨 - 몬 - 흐 - 덟 - 똥 - 콜 - 쓰 - 앤 - 델 - 팔 - 렀 - 폐 - 랄 - 벤 - 률 - 봄 - 왠 - 럼 - 짱 - 켰 - 럭 - 압 - 땅 - 댓 - 랩 - 멍 - 뮤 - 령 - 쁠 - f - 릿 - 낀 - e - 옥 - 윤 - 룸 - 객 - 딘 - 컵 - 폴 - 쟤 - 뷰 - 엘 - 템 - 댄 - 덴 - 눌 - 캠 - 벨 - 삭 - 홈 - 엉 - 헐 - 벗 - 벅 - 혈 - 밍 - 춥 - 낭 - 릉 - 셀 - 튜 - 엠 - 놈 - 될 - 춘 - 찜 - 알 - 헌 - 삼 - 닫 - 빛 - 흘 - 균 - 좌 - 껄 - 삐 - 펜 - 싹 - 탑 - 쏘 - 픽 - 햄 - 곧 - 덩 - 힐 - 낳 - 힌 - 섬 - 팩 - 툰 - 넷 - 꽂 - 례 - 흰 - 둥 - 큐 - 촬 - 핫 - 딱 - 괴 - 핀 - x - 땠 - 틱 - 랙 - 둔 - 슴 - 첨 - 렁 - 밴 - 칭 - 뜬 - 엇 - 퀴 - 납 - 협 - 몽 - j - 램 - 꼴 - 썰 - 찐 - 턱 - 틴 - 꼼 - 낄 - 뒀 - 끗 - 또 - 샵 - 휘 - 뼈 - 멜 - 팡 - 앨 - 쩍 - 칸 - 톤 - 끓 - 탐 - 혹 - 죽 - 짬 - 깃 - 빤 - 측 - 꽁 - 앴 - 펴 - 핸 - 겸 - 쿨 - 릇 - 얀 - 잖 - 갠 - 컷 - u - 끈 - 쿄 - 렴 - 덤 - 놀 - 갤 - 덮 - 흡 - 뚝 - 갚 - 댔 - 씹 - 찔 - 혁 - 띠 - 벼 - 뽀 - 팝 - 겉 - 칙 - 닦 - 썹 - 잘 - 묶 - 짠 - 손 - 빅 - 꾼 - 묘 - 묵 - 샘 - 캡 - 잇 - 둬 - 쭈 - 븐 - 뀐 - 댕 - 랫 - 흑 - 쫄 - 밖 - 곰 - 땀 - 렉 - 뽕 - 옷 - 숭 - 녕 - 렛 - 촉 - 힙 - 긋 - 샌 - 쩐 - 쨌 - 웅 - 쪘 - 쵸 - 냅 - 랍 - 썸 - 펙 - 랭 - 귤 - 껌 - 닿 - 갓 - 귄 - 굽 - 뇌 - 멈 - 욱 - 즘 - 캔 - 팟 - 뺄 - 룹 - y - 덥 - 폼 - 껍 - 쥐 - 듬 - 맹 - 팍 - 톱 - 흠 - 썩 - 맵 - 맙 - 뱅 - 콤 - h - 뜩 - 윗 - 닷 - 뺀 - 찝 - 넨 - 붓 - 믹 - 쩡 - 쩨 - 잼 - 쭐 - 룩 - 쇠 - 텀 - 숫 - 풋 - 눈 - 볍 - 쌩 - 겐 - 뤄 - 뻥 - 쪄 - 뻤 - 쾌 - 펌 - 핵 - 셉 - 닉 - 듀 - 략 - 텍 - 뱃 - 젝 - 빴 - 룰 - 앗 - 엥 - 윙 - 궈 - 셜 - 뿔 - 윈 - 챔 - 꼽 - 푼 - 쉐 - 댁 - 봇 - 칵 - 싶 - 탱 - 갱 - 쿼 - 빔 - 퉁 - 둑 - 빽 - 썬 - 몇 - 빗 - 헛 - 탓 - 꼰 - 쎈 - 깡 - 륵 - 쥬 - 퀄 - 밭 - 삿 - 큼 - 즉 - 툭 - 혐 - 탠 - 햇 - 껏 - 샷 - 핏 - 굿 - 뜰 - 펑 - 깥 - 뀔 - 쩜 - 앵 - 맻 - 껀 - 뢰 - 뉘 - 뱀 - 틈 - 붙 - 쏟 - 뎅 - 쇄 - 칩 - 띵 - 넥 - 푹 - 냠 - 멸 - 퀘 - 훅 - 찼 - 귈 - 룬 - 젓 - 냬 - 숲 - 횟 - 맞 - 뇨 - 멕 - 팽 - 숏 - 굔 - 슐 - 얄 - 쉰 - 츄 - 렬 - 횡 - 옹 - 뻘 - 옴 - 므 - 쑥 - 깄 - 옵 - 얘 - 찡 - 꽈 - 젖 - 콕 - 틸 - 큰 - 괌 - 첩 - 쿵 - 갸 - 녜 - 밸 - 왤 - 똘 - 칫 - 탭 - 쁨 - 섰 - 첼 - 킥 - 벙 - 솜 - 펀 - 펐 - 룡 - 훌 - w - 퓨 - 곽 - 늬 - 쓱 - 돔 - 욘 - 겄 - 텝 - 텅 - 렷 - 찹 - 귓 - 깅 - 툴 - 뭐 - 욜 - 얌 - 않 - 뛸 - 벳 - 겟 - 퀸 - 퍽 - 댈 - 왓 - 됨 - 걱 - 갇 - 눕 - 셰 - 뻑 - 숍 - 텨 - 뭇 - 깍 - 잎 - 쯔 - 팸 - 퐁 - 쌔 - 삽 - 읍 - 셈 - 콧 - 눅 - 쬐 - 슥 - 덧 - 럿 - 짭 - 끝 - 늑 - 괄 - 렙 - 릏 - 샹 - 즙 - 흙 - 쭝 - q - 륙 - 쿡 - 킷 - 낑 - 둡 - 엣 - 캉 - 톨 - 왁 - 펭 - 녁 - 멧 - 최 - 륨 - 쫑 - 짚 - 펄 - 떤 - 겜 - 붐 - 싯 - 짼 - 돗 - 렐 - 륜 - 팥 - 웰 - 갯 - 윽 - 캘 - 껜 - 랴 - 헨 - 렘 - 펠 - 킵 - 헝 - 많 - 깬 - 뎌 - 씽 - 꾹 - 뚤 - 챠 - 왈 - 젯 - 횐 - 곈 - 꿍 - 엿 - 잌 - 룻 - 깁 - 뜸 - 벡 - 솥 - 줍 - 첸 - 컥 - 팜 - 쭘 - 핬 - 넬 - 큘 - 캄 - 엌 - 쟀 - 륭 - 깰 - 돕 - 삥 - 윌 - 롬 - 맸 - 슛 - 겔 - 랠 - 쏭 - 밋 - 숯 - 읏 - 킴 - 낌 - 꽝 - 잭 - 뺨 - 펍 - 뗄 - 삔 - 캣 - 맴 - 셌 - 앰 - 웜 - 쨍 - 탬 - 텼 - 둠 - 씸 - 켄 - 쿤 - 츤 - 잰 - 쟈 - 촛 - 떵 - 쨈 - 챌 - 폿 - 좀 - 둣 - 밲 - 뽁 - 옇 - 춧 - 썽 - 휠 - 떳 - 굘 - 눔 - 릅 - 슉 - 뎃 - 룐 - 맷 - 젬 - 뎀 - 쉼 - 훗 - 쎌 - 냔 - 뗀 - 맬 - 샾 - 딥 - 꺄 - 봔 - 챈 - 톰 - 햐 - 헹 - 꿉 - 늠 - 웩 - 췌 - 튠 - 핼 - 훼 - 왜 - 샛 - 얍 - 빳 - 굼 - 놉 - 딧 - 똔 - 몹 - 옐 - 댐 - 듦 - 켈 - 텁 - 겅 - 냑 - 닛 - 믈 - 얏 - 튈 - 뎁 - 딕 - 룽 - 깻 - 떄 - 랏 - 웁 - 잴 - 팎 - z - 끕 - 넹 - 볕 - 샥 - 샬 - 젼 - 땔 - 쩝 - 댑 - 덱 - 뵐 - 셧 - 쨋 - 휜 - 냇 - 읜 - 츰 - 켔 - 딛 - 뇽 - 뵌 - 빢 - 옌 - 잿 - 귿 - 넴 - 띤 - 롸 - 큭 - 탤 - 햅 - 갰 - 곌 - 늄 - 뗬 - 숀 - 숴 - 촐 - 튿 - 캅 - 캇 - 콰 - 횔 - 늉 - 쫌 - 쳔 - 깟 - 넵 - 덨 - 뚠 - 렝 - 롹 - 뼘 - 욤 - 읔 - 쳇 - 켠 - 콱 - 큔 - 겡 - 끅 - 룔 - 뿍 - 셍 - 썅 - 씰 - 얠 - 쯩 - 쿱 - 푤 - 힝 - 넝 - 슌 - 챗 - 걔 - 펨 - 궂 - 꽥 - 뉸 - 쌘 - 엡 - 잽 - 켸 - 핌 - 힉 - 뤼 - 퓰 - 굣 - 굥 - 꽌 - 뉠 - 땁 - 랒 - 먀 - 뭥 - 삠 - 셤 - 쉈 - 쌨 - 얬 - 옙 - 읒 - 젱 - 쨀 - 헴 - 휸 - 숩 - 뤠 - 켤 - 낏 - 녈 - 뇸 - 뎄 - 땍 - 떈 - 떰 - 뚸 - 뛌 - 맀 - 맜 - 봥 - 뽜 - 샨 - 쒸 - 욧 - 줜 - 짯 - 쯘 - 퀀 - 큽 - 탉 - 폔 - 혠 - 짔 - 뭔 - 뫼 - 뾱 - 겝 - 꺅 - 껸 - 꼇 - 꽐 - 냘 - 놘 - 댜 - 덷 - 돠 - 땃 - 맽 - 멏 - 뫠 - 뭠 - 믐 - 밎 - 밨 - 뱁 - 뱌 - 볏 - 뵤 - 뽝 - 뿟 - 삯 - 솨 - 쎅 - 쎔 - 쏵 - 쒀 - 웟 - 읐 - 좍 - 죵 - 쨉 - 쩄 - 쬬 - 쭙 - 챂 - 쳥 - 췰 - 칬 - 퀼 - 퇸 - 픗 - 헙 - 휀 - 힛 - 셩 - 뷸 - 샅 - 솝 - 갼 - 껨 - 꼄 - 낢 - 냡 - 눟 - 뉩 - 늗 - 됙 - 됴 - 떱 - 랟 - 랮 - 릈 - 묜 - 뭑 - 뭬 - 믕 - 볌 - 봈 - 뷴 - 빘 - 빝 - 싷 - 쏸 - 얐 - 엤 - 옫 - 왬 - 웡 - 잍 - 잧 - 쟝 - 졍 - 좐 - 쥘 - 쥰 - 쩧 - 쩬 - 쫏 - 쭁 - 쵝 - 츈 - 츨 - 츳 - 켁 - 콴 - 틍 - 틑 - 퐉 - 픕 - 픙 - 핟 - 햘 - 헜 - 흄 - 흣 - 욍 - 뭘 - 흝 - 헸 - 햑 - 푀 - 큣 - 퀏 - 칟 - 촙 - 찦 - 찟 - 짆 - 옜 - 옉 - 얉 - 쒯 - 쑐 - 썻 - 쌕 - 솎 - 삻 - 쁩 - 봽 - 벋 - 뮴 - 맇 - 륑 - 띔 - 듈 - 됫 - 됑 - 댤 - 닯 - 눗 - 넚 - 꾿 - 꼳 - 겊 - 퐈 - 팹 - 틔 - 텟 - 탰 - 찧 - 쥔 - 줴 - 좃 - 읃 - 왯 - 옭 - 씅 - 쑹 - 슾 - 쉣 - 셸 - 뻰 - 뭡 - 뭍 - 묭 - 멎 - 뙤 - 떔 - 늰 - 뀜 - 꽹 - 곘 - 훙 - 튬 - 퉜 - 쿰 - 켕 - 칡 - 죗 - 쏼 - 쌂 - 셴 - 뻠 - 띌 - 띈 - 떽 - 늣 - 놥 - 넒 - 갉 - 퉤 - 퀭 - 켐 - 췻 - 챡 - 앎 - 씼 - 쑨 - 쐐 - 뱄 - 멨 - 롄 - 땟 - 귐 - 겋 - 횰 - 펩 - 쩠 - 앝 - 쓕 - 썜 - 삣 - 빻 - 몀 - 떫 - 덫 - 괭 - 헀 - 캤 - 쮸 - 읗 - 윅 - 쌜 - 쌉 - 쉿 - 쇳 - 뼌 - 뺌 - 밈 - 룟 - 뜀 - 꾜 - 읎 - 땋 - 넋 - 꿩 - 꼿 - 곯 - 폄 - 뉜 - 휑 - 퓸 - 튄 - 쭌 - 짊 - 뿡 - 뻬 - 렜 - 끍 - 훤 - 홧 - 푯 - 팼 - 탯 - 촤 - 짢 - 읊 - 쐬 - 놋 - 혓 - 팻 - 팰 - 킁 - 쨰 - 쌋 - 슁 - 쉑 - 뭄 - 묽 - 뎠 - 늪 - 쑈 - 볐 - 및 - 롷 - 텄 - 쫒 - 윳 - 쉭 - 쇽 - 넙 - 꺽 - 곪 - 윰 - 웍 - 앳 - 멩 - 휩 - 틋 - 콸 - 콥 - 슘 - 멱 - 띃 - 뒨 - 꿰 - 긌 - 좆 - 윷 - 옅 - 첵 - 숄 - 띨 - 궤 - 곗 - 헥 - 캬 - 챕 - 쟨 - 멓 - 똠 - 챘 - 쯧 - 짹 - 잦 - 몄 - 궜 - 짙 - 쏜 - 뗘 - 듭 - 뿅 - 빰 - 맏 - 딤 - 걜 - 밧 - 낵 - 낱 - 갬 - 쫘 - 쎘 - 싣 - 숑 - 섣 - 꾀 - 궐 - 툼 - 쉘 - 깽 - 촥 - 솟 - 끙 - 퀵 - 봬 - 꺠 - 뼛 - 쐈 - 찻 - 닳 - 긱 - 곶 - 푠 - 랖 - 죙 - 뵀 - 흩 - 휙 - 얕 - 썪 - 쥴 - 낡 - 꿇 - 곁 - 띡 - 걀 - 헉 - 촘 - 삑 - 뽂 - 뮌 - 빕 - 밉 - 꿋 - 훑 - 홋 - 됬 - 끽 - 캥 - 쫀 - 뵙 - 뗐 - 뽈 - 눴 - 뽐 - 뻣 - 핥 - 앚 - 얽 - 앓 - 갭 - 핍 - 텃 - 쑤 - 씁 - 괘 - 쾅 - 튕 - 쌰 - 섀 - 몫 - 갛 - 샜 - 뿜 - 뾰 - 뒹 - 뮬 - 컹 - 뛴 - 쩰 - 뤘 - 슝 - 삘 - 딲 - 잣 - 붉 - 껐 - 줏 - 뵈 - 쏴 - 쏙 - 봅 - 숟 - 닙 - 픔 - 펫 - 얗 - 넜 - 됩 - 늫 - 얜 - 굵 - 샴 - 뻗 - 짖 - 엮 - 깠 - 쭤 - 옳 - 벚 - 꺾 - 훠 - 씌 - 맑 - 껑 - 넛 - 랗 - 숱 - 폈 - 펼 - 맺 - 얹 - 팁 - 뭣 - 뱉 - 굶 - 깼 - 쏠 - 짰 - 융 - 훔 - 흉 - 섹 - 맣 - 빚 - 뺑 - 엎 - 뭉 - 멤 - 낯 - 딪 - 넉 - 췄 - 엊 - 쌈 - 쫍 - 돋 - 밟 - 쉴 - 쌌 - 긁 - 띄 - 찢 - 늙 - 좁 - 앱 - 뺏 - 쫓 - 헷 - 쫙 - 샐 - 릎 - 붕 - 꽉 - 겪 - 땄 - 뷔 - 뜯 - 낚 - 왼 - 얇 - 뺐 - 잊 - 팠 - 혔 - 닮 - 뚱 - 뚜 - 떴 - 꼐 - 컸 - 깎 - 묻 - 밝 - 꿨 - 섞 - 뒷 - 딨 - 걷 - 잃 - 홉 - 삶 - 깊 - 웹 - 씻 - 걘 - 뚫 - 얻 - 숨 - 흔 - 눠 - 옮 - 젊 - 맡 - 쌓 - 잤 - 꽤 - 짧 - 멋 - 볶 - 낮 - 꼈 - 녔 - 훨 - 굉 - 첫 - 썼 - 앉 - 높 - 끊 - 샀 - 굳 - 늦 - 읽 - 웠 - 옛 - 놓 - 찍 - 싫 - 밌 - 괜 - 떻 - 찮 - 랬 - 쌧 - 봣 - 쀨 - 삧 - 쥑 - 큄 - 갗 - 갹 - 걈 - 걉 - 걋 - 걤 - 걧 - 겓 - 겻 - 괍 - 괏 - 괞 - 굑 - 궝 - 귬 - 귯 - 긃 - 긔 - 깞 - 깸 - 꺌 - 꺤 - 껒 - 껵 - 꽜 - 꽨 - 꽷 - 꿑 - 꿜 - 뀨 - 뀰 - 낋 - 낟 - 냣 - 녓 - 녘 - 놏 - 놧 - 뇬 - 뇰 - 눓 - 뉼 - 늡 - 닪 - 닲 - 닸 - 닻 - 댇 - 덯 - 뎡 - 돚 - 됀 - 됄 - 뒴 - 듶 - 듸 - 딫 - 딿 - 땝 - 땬 - 떌 - 떙 - 뗌 - 뗏 - 똡 - 똣 - 똫 - 뙈 - 뚬 - 뛘 - 뜌 - 뜷 - 뜹 - 뜽 - 럐 - 럤 - 렿 - 뢉 - 뢍 - 뢴 - 룃 - 뤃 - 뤤 - 맫 - 맿 - 먁 - 먄 - 먕 - 먙 - 먺 - 몁 - 몪 - 묀 - 묙 - 뭰 - 믁 - 믾 - 밚 - 밷 - 뱍 - 뱡 - 벘 - 벛 - 벝 - 벰 - 벱 - 벵 - 볻 - 봘 - 봠 - 봡 - 뵜 - 붇 - 붜 - 뷘 - 뷜 - 뷥 - 븅 - 빱 - 빶 - 빾 - 뺘 - 뺸 - 뼉 - 뼜 - 뽄 - 뿕 - 뿝 - 쁸 - 삵 - 샄 - 샆 - 셕 - 셥 - 쇤 - 쉅 - 쉪 - 슦 - 싧 - 싰 - 싻 - 썃 - 쎙 - 쎠 - 쎤 - 쎼 - 쏩 - 쏱 - 쐴 - 쑬 - 쒔 - 쒹 - 쓍 - 씃 - 씄 - 씉 - 앏 - 앖 - 앜 - 앟 - 앺 - 얋 - 얖 - 얫 - 얾 - 엏 - 엩 - 엷 - 옂 - 옘 - 옯 - 옼 - 왐 - 왝 - 왱 - 욌 - 웝 - 웸 - 윘 - 윜 - 읓 - 읖 - 읠 - 읭 - 읺 - 잕 - 잛 - 쟬 - 젋 - 젔 - 젭 - 젰 - 졀 - 졉 - 졔 - 좇 - 좔 - 좜 - 죈 - 죤 - 줋 - 줐 - 줠 - 쥣 - 쥼 - 짇 - 짦 - 쨔 - 쨩 - 쩟 - 쩻 - 쪈 - 쪗 - 쪙 - 쪠 - 쫬 - 쬠 - 쭗 - 쮜 - 쯕 - 쯪 - 찠 - 챃 - 챚 - 챤 - 첬 - 쳉 - 쵤 - 춴 - 췍 - 췔 - 췬 - 칧 - 캍 - 캎 - 캑 - 캭 - 컁 - 컾 - 켑 - 켯 - 쾡 - 쿈 - 쿌 - 큇 - 큿 - 탙 - 텋 - 톺 - 퇼 - 툐 - 퉈 - 튁 - 튤 - 틉 - 팄 - 팤 - 퍈 - 퐅 - 푱 - 푿 - 풉 - 풰 - 퓩 - 픅 - 핧 - 핱 - 햔 - 햬 - 헵 - 혤 - 혬 - 홤 - 홰 - 횃 - 횠 - 횩 - 횻 - 훜 - 훝 - 휨 - 휭 - 휼 - 꿘 - 닜 - 땽 - 좋 - 큡 - 툿 - 퍄 - 훕 - init: null input_size: null ctc_conf: dropout_rate: 0.0 ctc_type: builtin reduce: true ignore_nan_grad: true model_conf: ctc_weight: 0.3 lsm_weight: 0.1 length_normalized_loss: false use_preprocessor: true token_type: bpe bpemodel: data/kr_token_list/bpe_unigram2309/bpe.model non_linguistic_symbols: null cleaner: null g2p: null speech_volume_normalize: null rir_scp: null rir_apply_prob: 1.0 noise_scp: null noise_apply_prob: 1.0 noise_db_range: '13_15' frontend: default frontend_conf: n_fft: 512 hop_length: 256 fs: 16k specaug: specaug specaug_conf: apply_time_warp: true time_warp_window: 5 time_warp_mode: bicubic apply_freq_mask: true freq_mask_width_range: - 0 - 30 num_freq_mask: 2 apply_time_mask: true time_mask_width_range: - 0 - 40 num_time_mask: 2 normalize: global_mvn normalize_conf: stats_file: exp/asr_stats_raw_kr_bpe2309/train/feats_stats.npz preencoder: null preencoder_conf: {} encoder: conformer encoder_conf: output_size: 512 attention_heads: 8 linear_units: 2048 num_blocks: 12 dropout_rate: 0.1 positional_dropout_rate: 0.1 attention_dropout_rate: 0.1 input_layer: conv2d normalize_before: true macaron_style: true pos_enc_layer_type: rel_pos selfattention_layer_type: rel_selfattn activation_type: swish use_cnn_module: true cnn_module_kernel: 31 decoder: transformer decoder_conf: attention_heads: 8 linear_units: 2048 num_blocks: 6 dropout_rate: 0.1 positional_dropout_rate: 0.1 self_attention_dropout_rate: 0.1 src_attention_dropout_rate: 0.1 required: - output_dir - token_list version: 0.10.0 distributed: true</code></pre> <strong>LM config</strong><pre><code>config: conf/tuning/train_lm_transformer3.yaml print_config: false log_level: INFO dry_run: false iterator_type: sequence output_dir: exp/lm_train_lm_transformer3_kr_bpe2309 ngpu: 1 seed: 0 num_workers: 1 num_att_plot: 3 dist_backend: nccl dist_init_method: env:// dist_world_size: 4 dist_rank: 0 local_rank: 0 dist_master_addr: localhost dist_master_port: 46339 dist_launcher: null multiprocessing_distributed: true unused_parameters: false sharded_ddp: false cudnn_enabled: true cudnn_benchmark: false cudnn_deterministic: true collect_stats: false write_collected_feats: false max_epoch: 25 patience: null val_scheduler_criterion: - valid - loss early_stopping_criterion: - valid - loss - min best_model_criterion: - - valid - loss - min keep_nbest_models: 10 grad_clip: 5.0 grad_clip_type: 2.0 grad_noise: false accum_grad: 4 no_forward_run: false resume: true train_dtype: float32 use_amp: true log_interval: null use_tensorboard: true use_wandb: false wandb_project: null wandb_id: null wandb_entity: null wandb_name: null wandb_model_log_interval: -1 detect_anomaly: false pretrain_path: null init_param: [] ignore_init_mismatch: false freeze_param: [] num_iters_per_epoch: null batch_size: 20 valid_batch_size: null batch_bins: 250000000 valid_batch_bins: null train_shape_file: - exp/lm_stats_kr_bpe2309/train/text_shape.bpe valid_shape_file: - exp/lm_stats_kr_bpe2309/valid/text_shape.bpe batch_type: numel valid_batch_type: null fold_length: - 150 sort_in_batch: descending sort_batch: descending multiple_iterator: false chunk_length: 500 chunk_shift_ratio: 0.5 num_cache_chunks: 1024 train_data_path_and_name_and_type: - - dump/raw/lm_train.txt - text - text valid_data_path_and_name_and_type: - - dump/raw/dev/text - text - text allow_variable_data_keys: false max_cache_size: 0.0 max_cache_fd: 32 valid_max_cache_size: null optim: adam optim_conf: lr: 0.005 scheduler: warmuplr scheduler_conf: warmup_steps: 25000 token_list: - - - '[unk]' - ▁ - 이 - 는 - 가 - 지 - 고 - 도 - 에 - 을 - 어 - 서 - 은 - 다 - 를 - 기 - 리 - 로 - 만 - 야 - 나 - 요 - 한 - 해 - 라 - 면 - 대 - 시 - 게 - 스 - 아 - 하 - 인 - 자 - 까 - 데 - 일 - 장 - 랑 - 드 - 주 - 네 - 들 - 긴 - 려 - 사 - 학 - 었 - 구 - 트 - 러 - 던 - 진 - 했 - 수 - 할 - 원 - 았 - 냐 - 년 - 래 - '0' - 치 - 단 - 니 - 보 - 워 - 점 - 의 - 정 - 르 - 마 - 월 - 히 - 분 - 상 - 운 - 으 - 회 - 간 - 식 - 신 - 든 - 영 - 거 - 우 - 부 - 산 - 과 - 크 - 여 - 체 - 관 - 비 - 버 - 명 - 용 - 소 - 날 - 양 - 제 - 미 - 생 - 전 - 였 - 동 - 오 - 화 - 카 - 프 - 길 - 천 - 국 - 방 - 음 - 져 - 물 - 직 - 봤 - 호 - 실 - 세 - 성 - 터 - 금 - 걸 - 행 - 봐 - 디 - 준 - 질 - 짜 - 레 - 새 - 색 - 역 - 목 - 린 - 업 - 티 - 두 - 끼 - 돌 - 케 - 유 - 외 - 문 - 타 - 무 - 약 - 있 - 개 - 났 - 내 - 님 - 통 - 박 - 번 - 느 - 토 - 계 - 선 - 연 - 공 - 복 - 저 - 울 - 둘 - 집 - 난 - 렸 - 줘 - 겠 - 안 - 경 - 머 - 력 - 쪽 - 급 - 매 - 애 - 격 - 차 - 씩 - 키 - 청 - 코 - 적 - 넘 - 와 - 등 - 졌 - 반 - 속 - 당 - 현 - 겨 - 심 - 담 - 파 - '8' - 그 - 말 - 종 - 태 - 모 - 름 - 글 - 튼 - 것 - 능 - 출 - 본 - 순 - 되 - 줬 - 메 - 임 - 강 - 커 - '7' - 달 - 피 - 꾸 - 배 - 란 - 엔 - 플 - 듣 - 건 - 군 - 갈 - 표 - 확 - 민 - 갔 - '9' - 쁘 - 활 - 합 - 맛 - 결 - 럽 - 씨 - 발 - 백 - 쳐 - 육 - 바 - 위 - 취 - 망 - 교 - 십 - 족 - 셨 - 참 - 떨 - '5' - 웃 - 중 - 감 - 쉬 - 근 - 브 - 술 - 페 - 변 - 테 - 릴 - 투 - 별 - 른 - 습 - 즈 - '1' - 증 - 독 - 충 - 짝 - 줄 - 떡 - 뒤 - 휴 - 셔 - 넣 - 절 - 험 - c - 악 - 처 - 루 - 편 - 남 - 패 - 빼 - 언 - 포 - 섯 - 슬 - 특 - 꺼 - 숙 - 살 - 쯤 - 병 - 창 - 겼 - 판 - 죠 - 누 - 형 - 답 - 희 - 입 - 허 - 끔 - 료 - 닐 - 택 - 림 - 각 - 볼 - 풀 - 틀 - 몸 - 필 - 후 - 골 - 없 - 예 - 켜 - 황 - 익 - 베 - 북 - 힘 - 법 - 함 - 꼬 - 랜 - 향 - 석 - 칠 - 환 - 품 - 침 - 혀 - 쓸 - 블 - 먹 - 조 - t - 채 - 욕 - 며 - 맨 - 권 - 검 - 된 - 초 - 잠 - 록 - 때 - 김 - 올 - 넌 - 션 - 깨 - 캐 - 송 - 녀 - 돼 - 탈 - 광 - 론 - 받 - 뽑 - 앞 - 재 - 째 - 접 - 움 - 밤 - 꼭 - 땐 - 작 - 깔 - '3' - 폰 - 멀 - 께 - s - 왔 - 퍼 - 곳 - 잔 - 쉽 - 짐 - 암 - 극 - 련 - 벽 - 헤 - 떠 - 끄 - 착 - 승 - 봉 - 더 - 빨 - 몰 - 촌 - 밥 - 딩 - 껴 - 류 - 뜨 - 못 - 따 - 놨 - 얼 - 궁 - 노 - 너 - 곤 - 논 - 클 - 싼 - 맥 - 팀 - p - 락 - 낫 - 추 - 쁜 - 킨 - 항 - 빌 - 쿠 - 늘 - 찌 - 찾 - 쌤 - 밀 - 돈 - 냈 - 빵 - 딴 - 딸 - 쩌 - 온 - 억 - 슷 - 써 - 걍 - 획 - 씬 - 런 - 응 - 챙 - 범 - 핑 - 쩔 - 팅 - 긍 - '4' - 됐 - 뛰 - 탄 - 층 - 퇴 - 센 - 춰 - 설 - 찬 - 듯 - m - 갑 - '2' - a - 왕 - 뉴 - 텔 - 렌 - 홍 - 탕 - 짓 - 밑 - 헬 - 축 - 존 - 립 - 랐 - 빡 - 곱 - g - '6' - b - 링 - 견 - 같 - v - 낙 - 츠 - 젠 - 맘 - 놔 - 렵 - 철 - 땜 - 갖 - 혼 - 쇼 - 값 - 닭 - 쪼 - 깝 - 텐 - 픈 - 탁 - 쓴 - 농 - 량 - 염 - 불 - 냄 - 척 - 콘 - 겁 - 효 - 규 - 섭 - 꿈 - 톡 - 완 - 곡 - 액 - d - 쎄 - 평 - 먼 - 킹 - 덜 - 훈 - 턴 - 쳤 - 널 - 꿀 - 닌 - 책 - 깜 - 낼 - 롤 - k - 엄 - 총 - 덕 - 렇 - 믄 - 친 - 믿 - 흥 - 롱 - 빠 - 뜻 - 짤 - 쌍 - 닥 - 컨 - 웬 - 엽 - 찰 - 혜 - 꿔 - 뿌 - 뻐 - 낸 - 빈 - 뻔 - 셋 - 즐 - 튀 - 겹 - 득 - 끌 - 람 - 막 - 졸 - 녹 - 잡</code></pre>