Upload 2 files

KLM 4.4 - MRF Hifi-GAN Pretrained Model

본 모델은 MRF-HIFIGAN의 사용을 위해 생성된 사전학습 모델이며, Applio 3.2.8 이상 버전 또는 Codename 포크에서만 사용할 수 있습니다.
기존 Mainline, Disconneted, Mangio Fork에서는 사용이 불가합니다.

KLM 4.4의 특징 :

1. KLM 4.4는 고주파 파형을 강제로 증폭시켜 이미지 폴딩을 유발하고 그 데이터를 트래쉬 청크로 학습시켰습니다.
즉 오디오 자체에서 발화가 불가능한 초-고음역대의 추론이 가능하며, 그 결과 일부 미러링 현상이 발생할 수도 있지만 오디오의 간섭이 최대한 없도록 하였습니다.

2. 화자 분리 채널 (sID) 에서 0번 채널에 (제네럴 채널) 저-중-고음의 데이터셋을 피치 레시오를 조정하였습니다.

3. 키-보컬리스트들의 보컬 오디오를 재녹음 하였습니다. 전처리 과정에서 노래 도중 오디오가 강제로 슬라이싱되는 현상을 방지하기 위해 각각의 노래를 3초 단위로 끊어 불렀으며
전처리를 모두 수동으로 처리하였습니다.

4. 전반적인 데이터셋의 정리를 다시한번 진행하였으며, 화자의 성비율과 연령대가 최대한 비슷하도록 설정하였습니다.

5. 음압이 다른 화자간의 간섭을 피하기 위해 밸런싱 작업을 진행하였습니다.

자세한 내용은 Discord의 설명을 참조하시기 바랍니다.

D_KLM44_X1_MRF_40khz.pth

@@ -0,0 +1,3 @@
+version https://git-lfs.github.com/spec/v1
+oid sha256:983e3d7044b9789a22cf6af26a6e20f899e483af34cc8bc26ddddde82433044d
+size 857131354

G_KLM44_X1_MRF_40khz.pth

@@ -0,0 +1,3 @@
+version https://git-lfs.github.com/spec/v1
+oid sha256:d05d6013f7a1227769b98e5c30cd8b1ce36d6be657c1c650e37d33b8276cd80f
+size 438205790