네이버에서 CLOVA Voice의 음성 합성 기술로 제작한 텍스트를 음성으로 변환하는 클로바더빙을 소개한다. 동영상에 더빙할 내용을 입력하면 간단하게 AI 보이스를 생성하는 서비스인 네이버 클로바더빙은 일정 한도 내에서 무료 사용이 가능하지만, 제대로 사용하려면 유료 버전을 구매해야 한다.
- 제품명 : 클로바더빙
- 종류 : AI 보이스
- 플랫폼 및 라이선스 : PC 및 모바일 / 유료(무료 버전 제공)
클로바더빙 서비스 소개
동영상에 간단히 AI 보이스를 더해서 더빙이 가능한 클로바더빙은 무료 사용 시에는 반드시 출처 표기를 해야 한다. 기본적으로 유료로 구매해서 사용해야 하지만, 클로바더빙은 매월마다 일정 한도 내에서 무료로 사용할 수 있으므로 헤비 유저가 아니라면 가볍게 즐길 수 있다. 또한 뒤에서 언급하겠지만 텍스트를 음성으로 변환하는 프로그램은 여럿 존재하는데, 대부분 유료로 판매하지만 일정 한도 내에서 무료 사용도 가능하다. 따라서 이러한 프로그램들을 활용하면 일반인들도 텍스트를 음성으로 변환해서 원하는 영상에 더빙 작업을 할 수 있다.
위에서 보듯이 무료 버전은 5개 프로젝트를 제공하는데, 매월 1일마다 초기화하는 방식으로 매월 5개 프로젝트를 무료로 생성할 수 있다. 무료 버전을 사용할 때에는 반드시 출처 표기를 남겨야 하므로 주의할 필요가 있다. 출처를 표기하는 방식은 워터마크를 표시하거나, 제목 또는 자막에 출처를 명시하는 방식 중 하나를 선택해 사용하면 된다.
위의 이미지를 누르면 클로바더빙을 무료로 사용할 시 반드시 지켜야하는 출처 표기 방식을 확인할 수 있으므로, 클로바더빙을 사용해서 더빙한 영상을 업로드하기 전에 반드시 확인해야 한다. 유료 버전을 구매하면 출처 표기를 하지 않아도 되며 상업적 이용도 가능하다.
클로바더빙 사용하기
텍스트를 음성으로 변환해서 오디오 파일을 생성해 주는 클로바더빙은 컴퓨터뿐만 아니라 모바일에서도 사용이 가능하다. 우선 컴퓨터에서 무료 버전을 사용하는 방법을 살펴본 후에 모바일에서 활용하는 방법을 소개한다.
위의 이미지를 누르면 클로바더빙 사이트로 연결하는데, 여기에서 전면에 위치한 무료로 시작하기 버튼을 누르면 매월마다 5개 프로젝트를 무료로 제작할 수 있다. 이때 클로바더빙 무료 버전 사용 시에도 네이버 계정으로 로그인을 해야만 사용이 가능하다.
클로바더빙을 무료로 사용하더라도 이용 약관이 나오는데, 이때 상단에 위치한 동의 항목 2개만 체크하고 확인 버튼을 누르면 된다. 자세한 개인 정보 및 프로모션 정보 동의 등은 무시해도 무료 버전을 사용할 수 있다.
그러면 위와 같은 UI가 나오면 우선 프로젝트를 생성해야 한다. 앞에서 언급했듯이 무료 버전은 매월 5개까지 프로젝트를 무료로 생성할 수 있다. 더불어 위에 무료 프로젝트에서 활용할 수 있는 파일 형식과 제한 사항 등이 나온다. 참고로, 그대로 기술하면 동영상 파일은 FHD 이하 해상도의 MP4 및 MOV 형식만 지원하며 최대 20분, 500MB까지만 업로드할 수 있으며, 프로젝트 파일은 최대 5개까지 저장할 수 있고 최종 저장 날짜부터 최대 30일 간만 저장한다는 내용이다. 여기서 중요한 내용은 영상 파일은 최대 20분까지만 지원하며 MP4 또는 MOV 형식만 가능하다는 점이다.
새 프로젝트 생성을 누르면 프로젝트명을 기재하는 팝업이 나오는데, 임의로 프로젝트명을 입력한 후에 하단에 위치한 생성 항목을 누르면 된다. 이후 클로바더빙 프로그램이 웹에서 바로 실행하는데, 이때 2가지만 기억하면 된다. 첫째로 동영상 또는 이미지를 추가하고 두번째로 더빙할 내용을 입력하는 것이다.
이 2가지를 기본으로 수행한 후에 원하는 더빙 목소리 또는 효과음 등을 선택하거나, 영상 중에서 더빙할 위치를 지정할 수 있다. 하지만 영상에 맞춰 해당 음성이 나오는 더빙 위치까지 지정하는 건, 전문가 영역으로 해당 기능까지 사용할 분은 유료 버전을 구매해서 클로바더빙 사용법을 숙지할 필요가 있다.
처음에 동영상 추가를 누르면 주의사항 안내 팝업이 나오는데, 확인 항목에 체크한 후에 확인 버튼을 눌러야만 이후부터 사용이 가능하다. 여기에서는 동영상 추가가 아니라 이미지 추가 버튼을 눌러서 스테이블 디퓨전으로 생성한 AI 이미지에 음성을 추가하면서, 클로바더빙의 기본적인 사용법을 예시로 소개한다.
위와 같이 이미지(또는 영상)를 추가한 후에 더빙할 문자를 입력한 후에, 상단에서 원하는 목소리를 선택하고 하단의 미리 듣기를 눌러서 제대로 나오는지 확인한다. 이후 타임라인에서 더빙을 시작할 위치로 붉은 선을 가져다 놓은 후에 더빙 추가 버튼을 누른다.
그러면 위와 같이 해당하는 영상 또는 이미지에 더빙을 입힌 새 프로젝트 생성을 누르라는 문구가 하단에 나온다. 물론 여기에 이미지 또는 영상을 추가한 후에 동일한 방식으로 더빙을 추가할 수 있다. 참고로, 무료 버전에서는 20분 영상까지 더빙이 가능지만, 여기에서는 테스트용이므로 짧게 20초 정도만 활용한다.
이후 새 프로젝트 생성을... 이라는 하단 문구를 누른 후에 다운로드 항목을 선택하나, 클로바더빙 UI에서 우측에 위치한 다운로드 버튼을 누르나 동일하게 작업한 영상을 다운로드할 수 있다.
그러면 위와 같이 출처 표기를 해달라는 주의사항이 나오는데, 확인 항목에 체크한 후에 확인 버튼을 누른다. 무료 버전은 영상이 5초 이상이면 자동으로 상단 우측에 워터마크를 삽입하므로, 따로 출처 표기 작업을 하지 않아도 된다.
이후 원하는 파일 형식을 선택하면 바로 다운로드를 진행한 후에 사용자 피드백 팝업이 나온다. 사용자 피드백 팝업은 꼭 기재해야 하는 필수는 아니므로 다음에 쓸게요 항목만 눌러도 영상을 사용하는 데 전혀 지장이 없다.
다운로드한 해당 영상 파일은 컴퓨터 바탕화면에 나타나거나 다운로드를 지정한 폴더에 저장한다.
위에 첨부한 영상이 바로 클로바더빙을 활용해서 해당 AI 이미지에 더빙을 입힌 영상이다. 테스트용이므로 간단히 하나의 이미지만 사용했지만, 여러 장의 이미지에 각각 다른 음성 보이스를 입히거나 영상에 더빙을 추가하는 것도 가능하다.
참고로, 텍스트를 음성으로 변환하는 기술은 오래 전부터 존재했는데 간단한 코딩만으로도 가능하다. 하지만 최근에는 실제 성우들의 목소리를 활용하여 세련된 더빙이 가능한데, 대부분 유료로 구매해야 하지만 클로바더빙과 마찬가지로 일정 한도 내에서는 무료 사용이 가능하다.
클로바더빙 서비스 살펴보기
위에서 클로바더빙을 간단히 사용하는 방법을 살펴보았는데, 조금 더 클로바더빙 UI를 중심으로 소개하면 다음과 같다.
우선 1번 항목은 프로젝트 목록 이동 영역으로 클릭하여 내 프로젝트 메뉴 화면으로 이동할 수 있다. 2번 항목은 프로젝트 저장 영역으로 클릭하여 편집하고 있는 프로젝트의 현재 상태를 저장할 수 있다. 3번 항목은 프로젝트 다운로드 영역으로 클릭하여 편집하고 있는 프로젝트를 원하는 형식의 파일로 다운로드할 수 있다. 여기에는 3가지 파일 형식 중 하나를 선택할 수 있는데, 합성한 보이스 및 효과음을 개별 파일로 다운로드하는 개별 더빙 파일, 이미지 또는 영상 없이 합성한 보이스와 효과음만을 하나의 파일로 다운로드하는 음원 파일, 업로드한 파일과 합성한 보이스 및 효과음을 영상 동영상 파일로 다운로드하는 영상 파일이 선택 항목으로 주어진다. 다음으로 4번째 항목은 파일 업로드 영역으로 동영상, 이미지, PDF 파일 업로드 및 삭제가 가능하며 더불어 타임라인 재생 시 프로젝트 미리보기가 가능하다.
5번 항목은 더빙 및 효과음 추가 영역으로 합성할 보이스를 선택하거나 더빙할 내용을 입력하는 더빙 추가, 합성할 효과음을 미리 듣거나 추가할 수 있는 효과음 추가, 전체 보이스 목록 확인 및 미리듣기, MY 보이스 제작, 즐겨찾는 보이스 목록 수정 등이 가능한 보이스 수정이 위치한다. 6번 항목은 프로젝트명 영역으로 현재 편집하고 있는 프로젝트 이름이 나타난다. 7번 항목은 조작 버튼 영역으로 타임라인을 처음부터 또는 특정 시점에서 재생, 정지하거나 타임라인의 맨 앞, 뒤로 이동할 수 있는 버튼이 위치한다. 8번은 타임라인 및 더빙 목록 영역으로 업로드한 파일, 더빙 및 효과음 등 프로젝트를 구성하는 요소를 시간 순서별로 확인 및 편집이 가능하다. 세부적으로 타임라인 탭은 업로드한 파일, 더빙 보이스, 효과음을 시간 순서에 따라 확인 및 편집이 가능하다. 더빙목록 탭은 더빙한 보이스 관련 정보 확인 및 삭제, 보이스 변경, 더빙 내용 편집 및 삭제가 가능하다.
이러한 클로바더빙은 컴퓨터뿐만 아니라 모바일에서도 사용이 가능한데, 모바일 운영체계에 따라 구글 플레이스토어 또는 앱스통어에서 무료로 설치가 가능하다. 물론 사용 시에는 컴퓨터에서와 동일하게 무료 버전은 일정 한도 내에서만 무료 사용이 가능하며, 무료 한도를 초과 시에는 유료로 구매해서 사용해야 한다.
이렇듯 AI 기술을 활용한 클로바더빙은 간단히 타이핑만으로 더빙 제작이 가능할 뿐만 아니라 기존의 성우 목소리 이외에도 자신의 목소리를 직접 활용할 수 있는 보이스 메이커 기능도 제공하며, 한국어 이외에도 영어, 스페인어, 대만어 등 다양한 AI 보이스를 지원한다.