[ElevenLabs] 내 목소리, 말투까지 똑같은 AI 목소리를 만들어서 나 대신 일하도록 시켜볼게요! (feat. 일레븐랩스 voice cloning)

ElevenLabs에서 음성 파일 준비하는 법

보이스 클로닝을 시작하려면 가장 먼저 깨끗한 내 목소리 파일이 필요해요. 배경음악이 깔려 있거나, 다른 사람 목소리가 섞여 있으면 학습이 제대로 안 됩니다.

집에서 녹음할 때는 조용한 방에서 5~9분 분량을 8개 정도 만들어 두는 게 좋아요. 파일 하나당 10MB를 넘기지 말고, mp3나 wav 형식으로 저장하면 됩니다.

ElevenLabs 홈페이지에 들어가서 Voices 메뉴를 클릭하면 기본 제공 목소리도 들어볼 수 있어요. 미리 연습 삼아 Alice 목소리를 들어보면서, 어떤 톤이 콘텐츠에 맞을지 감을 잡아 보세요.

파일을 업로드할 때는 최대 25개까지 올릴 수 있으니, 가능하면 다양한 문장으로 녹음해 두는 걸 추천해요. 이렇게 준비를 잘 해두면 나중에 복제 정확도가 확 올라갑니다.

인스턴트 vs 프로페셔널, 어떤 걸로 복제할까

ElevenLabs 요금제에 따라 복제 품질이 크게 갈려요. Starter 플랜에서는 Instant Voice Cloning만 쓸 수 있는데, 학습 시간이 짧아서 제 목소리와 60~70% 정도만 비슷하게 나왔어요.

반면 Creator 플랜(월 22달러)에서 Professional Voice Cloning을 쓰면 파인튜닝 과정이 길어서 90% 이상 비슷한 목소리가 나옵니다. 처음 구독하면 첫 달 반값(11달러) 혜택도 있으니, 한 달만 써보고 결정해도 괜찮아요.

복제 과정은 간단해요. New Voice 버튼을 누르고, 목소리 이름을 정한 뒤 준비한 파일을 드래그로 올리면 끝납니다. Professional을 선택하면 나중에 목소리 인증(지정 문장을 읽는 과정)을 한 번 더 해야 해요.

인증이 끝나면 보통 1시간 정도 기다리면 완료 메일이 옵니다. Instant와 Professional 결과를 같은 문장으로 비교해 보면 차이가 확실히 느껴지니까, 둘 다 만들어서 직접 들어보는 걸 추천해요.

AI 목소리로 실제 콘텐츠 만들 때 팁

복제된 목소리를 쓸 때는 Stability와 Similarity 값을 둘 다 70%로 맞춰 보는 게 제일 자연스러웠어요. 이 값을 80% 이상으로 올리면 오히려 딱딱해지는 경우가 많습니다.

같은 문장이라도 Generate Speech를 누를 때마다 결과가 조금씩 달라지니까, 마음에 들 때까지 3~4번은 다시 생성해 보세요. 한 단어 발음이 이상하면 그 단어만 영어로 써보거나 한글 발음으로 바꿔서 테스트하면 금방 고쳐집니다.

텍스트는 150자 이내로 끊어서 생성하는 게 중요해요. 길게 한 번에 만들면 뒤로 갈수록 발음이 흔들리는 경우가 많습니다. 느낌표나 물음표를 적절히 넣으면 뉘앙스도 살아나서 더 자연스럽게 들려요.

이렇게 만든 AI 목소리는 영상 내레이션뿐만 아니라, 팟캐스트 대본 읽기나 SNS용 음성 콘텐츠까지 다양하게 활용할 수 있습니다. 한 번 만들어 두면 “오늘은 목이 안 좋아서…” 하는 핑계를 댈 필요가 없어지죠.