hae-koos

https://hae-koos.tistory.com/79 [ 포스텍 인공지능연구원 연구인턴 ] HiFi-GAN 논문 리뷰 / Vocoder 개념 설명 및 정리 [ 포스텍 인공지능연구원 연구인턴 ] HiFi-GAN 논문 리뷰 / Vocoder 개념 설명 및 정리 Vocoder 배경지식 : Mel-spectrogram 넣으면 Wave 만드는 친구 → 공부하자 BACKGROUND 합성음 음질을 결정하는 요소 (Neural Speech Synthesis 관점) 주어진 텍스트로 멜 스펙트로그램을 얼마나 잘 생성해 낼 수.. hae-koos.tistory.com https://github.com/jik876/hifi-gan [ Official Repository ] HiFi-GAN: Generative Advers..

Vocoder 배경지식 : Mel-spectrogram 넣으면 Wave 만드는 친구 → 공부하자 BACKGROUND 합성음 음질을 결정하는 요소 (Neural Speech Synthesis 관점) 주어진 텍스트로 멜 스펙트로그램을 얼마나 잘 생성해 낼 수 있는가 멜 스펙트로그램으로부터 음성의 파형을 얼마나 선명하게 합성할 수 있는가 → Vocoder 💡 Audio → Mel-spectrogram 1. audio를 주파수 영역에서 분석하기 위해 STFT 수행, 주파수 성분 특징점을 추출한다. 2. 그 중 크기 성분에 해당하는 magnitude 값을 이용해 Mel-filterbank 적용한다. 3. 이를 Mel-scale로 변환시켜 Mel-spectrogram을 얻는다. 위와 같은 과정으로 멜스펙트로그램을 ..