메타, 음악 생성 AI '오디오크래프트' 공개

오픈소스 인공지능(AI) 개발에 주력하는 메타가 2일(현지시간) 프럼프트를 통해 음악을 생성하는 AI 도구인 ‘오디오크래프트(AudioCraft)’ 오픈소스로 공개했다.

 

뮤직젠(MusicGen) ▲오디오젠(AudioGen) ▲인코덱(EnCodec) 등 3가지 생성 AI 모델을 포함하고 있으며, 이들은 각각 음악, 환경 소리 및 효과음을 생성하는 기능을 가지고 있다.

 

뮤직젠은 텍스트를 입력하면 음악을 생성한다. 메타는 앞서 지난 6월 저작권을 소유하거나 이 목적을 위해 특별히 라이선스를 획득한 음악 총 2만시간 분량으로 사전 훈련한 뮤직젠을 공개한 바 있다. 이번에는 사용자가 자신의 음악 데이터 세트에서 모델을 훈련할 수 있도록 훈련 코드까지 공개했다.

 

오디오젠은 텍스트 프롬프트로 음향 효과와 같은 오디오를 생성하는 도구다. 개 짖는 소리, 자동차 경적 또는 나무 바닥을 밟는 소리와 같은 음향 효과를 생성할 수 있다.

 

인코덱은 적은 잡음으로 높은 품질의 음악을 만드는 역할을 수행한다. 모든 종류의 오디오를 압축하고 원래 신호를 복원하도록 특별히 훈련한 신경망 기반 오디오 압축 코덱이다. 오디오를 지나치게 많이 조작할 때 발생하는 아티팩트가 적은 오디오를 만들 수 있다

 

 

메타, 음악·오디오 생성 AI ‘오디오크래프트’ 오픈소스로 공개 

메타, 음악·오디오 생성 AI ‘오디오크래프트’ 오픈소스로 공개 - AI타임스