보컬 AI로 특정 가수가 다른 가수 곡을 커버하는 영상들을 관심있게 봐왔는데,
왠지 내가 더 잘 학습시킬 수 있지 않을까란 근거 없는 자신감과 함께 시도해보려고 한다.
RVC는 간단하게 말하면, VITS(Conditional Variational Autoencoder with Adversarial Learning for End-to-End Text-to-Speech)에 기반한 '보컬 변환 기술'이라 생각하면 좋겠다.
디퓨전 모델 및 Web UI은 빠르게 발전하고 있기 때문에, 추후엔 실행 방법이 지금과 (23년 7월)과 조금 다를 수 있음을 고지
1. RVC Web UI 파일 다운로드
https://colab.research.google.com/drive/1TU-kkQWVf-PLO_hSa2QCMZS1XF5xVHqs#scrollTo=XAuGUlHDB4cx
RVC Crepe v2 + persistent storage / autosave
Colaboratory notebook
colab.research.google.com
위 링크로 들어가서 코랩 파일을 드라이브에 사본으로 저장해준다.
사실 공식 RVC Web UI는 다수의 한문으로 설명이 되어 있어서, 조금 더 쉽게 접할 수 있는 버전의 Web UI를 찾아왔다.
Training RVC v2 models Guide (by kalomaze)
RVC v2 Training Guide Training Setup Make sure your dataset is prepared using the best quality isolations or audio that you can find. UVR with Kim vocal models (more recently Voc FT) or MDX B on MVSEP will work best, generally, for isolating the vocals. Th
docs.google.com
https://docs.google.com/document/d/13_l1bd1Osgz7qlAZn-zhklCbHpVRk6bYOuAuB78qmsE/edit
RVC v2 AI Cover Guide (by kalomaze)
Making AI Song Covers with RVC The RVC project is the AI software we’re gonna be using in this guide. You can also train your own voices (there’s a guide for that linked later). Google Colab or Local Install Pick which of these two options for making a
docs.google.com
위 링크들은 사용 방법이 담긴 문서.
추후에 숙지해서 요약 전달해보고자 한다. 우선 설치와 실행부터...
2. 설치 및 WEB UI 실행 방법
Step 1을 실행해준다. 팝업이 두어차례 뜨는데, 무시하고 진행하기, 허용해주면 된다.
필수적인 사전작업이다.
구글드라이브에 새로운 폴더를 만든 후 모델 학습에 사용할 음성 데이터를 zip 파일 형식으로 저장하여 넣어준다.
(훈련 데이터파일이 하나면 압축 안해도 된다.)
새 폴더 이름은 'dataset' 이어야 하고, 저장할 데이터 이름은 임의로 정해도 무방하다.
우선 Step2를 건너뛰고, Step3에서 앞서 저장한 데이터를 불러와준다.
GUI를 실행해준다. (왜인지 모르겠으나 Step 3이 중복)
실행되면 제공되는 Public URL 에 접속해준다.
모델 학습과 보컬 변환은 다음 포스팅에서 이어서 다뤄보려 한다.
https://kosonkh7.tistory.com/168
2. RVC Web UI 알아보기: 모델 훈련 방법, AI 보컬 커버 생성 가이드
https://kosonkh7.tistory.com/166 1. RVC Web UI 알아보기: 설치 및 실행 방법 가이드 (따라만 하면 됨) 보컬 AI로 특정 가수가 다른 가수 곡을 커버하는 영상들을 관심있게 봐왔는데, 왠지 내가 더 잘 학습시
kosonkh7.tistory.com
'Diffusion 기반 생성형 AI 활용기 > RVC 보컬 커버' 카테고리의 다른 글
| 대세 보컬 AI 간단 비교: So-Vits-SVC vs RVC 비교 (RVC 선택한 이유) (0) | 2023.07.19 |
|---|---|
| [Echo Remove AI] 에코 제거하여 보컬 데이터 품질 높이기 | De Reverb HQ 활용 방법 및 한계점 (0) | 2023.07.17 |
| 3. RVC Web UI 알아보기: 모델 훈련 최적의 하이퍼파라미터 조작 팁 (0) | 2023.07.16 |
| 2. RVC Web UI 알아보기: 모델 훈련 방법, AI 보컬 커버 생성 가이드 (0) | 2023.07.15 |
| [MR 제거, 보컬 추출] AI를 활용한 고품질 보컬과 음원 분리 초간단 가이드 : Ultimate Vocal Remover (0) | 2023.07.15 |