어도비(Adobe)가 AI로 음성·배경음악·효과음을 만드는 파이어플라이(Firefly) 오디오 도구를 정식 출시했다. 어도비는 창작자가 대본을 음성으로 바꾸거나 영상에 맞는 음악과 효과음을 제작할 수 있으며, 생성된 음악에는 범용 라이선스가 부여된다고 설명했다.
씨넷(CNET)은 8월 20일 어도비가 파이어플라이의 AI 오디오 도구를 일반에 공개했다고 보도했다. 제이 르뵈프 어도비 AI 오디오 부문 책임자는 인터뷰에서 새 도구가 완성된 노래를 몇 초 만에 만드는 수노(Suno) 같은 서비스와 달리 영화 제작자와 음악가, 콘텐츠 창작자를 위한 전문 도구를 지향한다고 말했다.
파이어플라이에서 대본을 업로드하면 여러 성별과 연령대의 인공 음성 중 하나를 골라 오디오 파일로 변환할 수 있다. 생성한 음성은 20개가 넘는 언어로 번역할 수 있으며, 인명이나 제품명처럼 발음이 어려운 단어에는 사용자가 발음 안내를 추가할 수 있다. 음성이 단조롭고 기계적으로 들리는 문제를 줄이기 위해 감정 태그를 활용해 특정 표현과 분위기를 지정하는 기능도 제공한다.
어도비는 감정 표현을 학습할 수 있도록 보다 감정적인 음성 자료를 모델 훈련에 사용했다고 설명했다. 르뵈프 책임자는 감정을 지시하는 형용사와 동사를 처음부터 학습 과정에 반영해 표현력을 높였다고 말했다. 어도비의 AI 정책에 따르면 모델 훈련에는 라이선스를 확보했거나 공개적으로 이용 가능한 콘텐츠와 데이터만 사용한다. 회사는 고객의 작업물을 서비스 개선을 위한 훈련에 사용하지 않는다고 밝혔다.
음악 생성 기능은 완성된 AI 노래가 아니라 영상용 배경음악 제작에 초점을 맞췄다. 사용자는 분위기와 장르, 용도를 빈칸 채우기 방식으로 입력할 수 있고, 영상을 올리면 파이어플라이가 영상에 맞는 프롬프트를 작성해 최대 30초 길이의 샘플 트랙 4개를 제안한다. 효과음 기능은 문장 프롬프트나 녹음 파일을 입력으로 받는다. 사용자가 영상에서 직접 낸 소리를 업로드하면 이를 공룡이나 괴물의 포효처럼 바꾸고 영상에 맞춰 동기화할 수 있다.
어도비는 AI로 만든 모든 오디오가 상업적으로 안전하며, 생성된 음악에는 자동으로 범용 라이선스가 부여된다고 밝혔다. 저작권 음악이 포함된 영상이 소셜미디어 플랫폼에서 제재받을 수 있는 상황에서 창작자의 라이선스 부담을 줄이려는 조치다. 다만 AI 음악을 둘러싼 논란은 계속되고 있다. 버클리 음대 조사에서는 음악가와 창작자의 5명 중 1명이 작업 과정에서 생성형 AI를 사용했고, 3명 중 1명은 최종 결과물에 AI 생성 오디오를 포함한 것으로 나타났다. 스포티파이와 디저 등 스트리밍 플랫폼은 이용자들의 요구에 따라 AI 생성 음악 표시를 도입하고 있으며, 수노 역시 유튜브 동영상으로 모델을 훈련했다는 논란 뒤 표시를 추가하고 있다.
새 도구는 지난해 어도비 맥스 행사에서 베타로 공개된 뒤 파이어플라이를 통해 일반 제공되기 시작했다. 이용하려면 어도비의 AI 허브인 파이어플라이에 접근해야 하며, 사용 중인 크리에이티브 클라우드 요금제나 회사의 AI 권한에 따라 별도 가입이 필요할 수 있다. 오디오 생성은 생성형 크레딧을 차감하고, 파이어플라이 단독 구독료는 월 10달러부터 시작한다. 버클리 신흥예술기술연구소의 마크 에티어 전무이사는 창작자가 표현을 직접 통제하면서 작업을 지원받는 도구를 원한다고 말했다.
