Meta, Metinden Müzik Üretebilen “MusicGen” Yapay Zekâ Modelini Duyurdu

Birçok teknoloji devi yapay zekâ alanında atılımlar yapmaya devam ediyor. Facebook ve Instagram’ın çatı şirketi Meta da bunlardan biri. Mark Zuckerberg idaresindeki şirket, birkaç hafta evvel yapay zekâ için kendi özel çipini geliştirdiğini duyurmuştu.

Meta’dan artık ise bir öteki yapay zekâ adımı geldi. Meta’nın Audiocraft araştırma takımı, MusicGen isimli bir açık kaynaklı lisan modelini duyurdu.

MusicGen, metinden müzik üretebiliyor

We present MusicGen: A simple and controllable music generation model. MusicGen can be prompted by both text and melody.
We release code (MIT) and models (CC-BY NC) for open research, reproducibility, and for the music community: https://t.co/OkYjL4xDN7 pic.twitter.com/h1l4LGzYgf

— Felix Kreuk (@FelixKreuk) June 9, 2023

ChatGPT’nin sesli versiyonu diyebileceğimiz MusicGen modeli, metin komutlarıyla yeni müzikler üretebiliyor. Kullanıcılar, istediği müzik biçimini tanımlayarak modeli kullanabiliyor. Şayet isterlerse mevcut bir melodiyi de ekleyebiliyorlar.

📓 Colab notebook at: https://t.co/wYbBR0RZab
🎵 More samples can be found here: https://t.co/87v9p5lDSS. pic.twitter.com/J278AtFoo6

— Felix Kreuk (@FelixKreuk) June 9, 2023

Meta’da yapay zekâ araştırmacısı Felix Kreuk tarafından paylaşılan bir görüntü MusicGen’in nasıl yeteneklere sahip olduğunu ortaya koyuyor. Görüntüde hâlihazırda bir müziğin eklendiği, sonrasında ise  bir komut girerek bu müziğin değiştirilebildiği görülüyor. Bir başka görüntüde ise rastgele bir hazır ses kullanılmadan “akılda kalıcı melodiler, tropikal vurmalı çalgılar ve hareketli ritimler içeren plaj için uygun pop dans şarkısı” komutu yazılarak bir ses oluşturulabildiği görülüyor.

Araştırma grubu, 12 saniye civarında ses üretebilen modelin eğitimi için dahili bir bilgi kümesinden 10.000 yüksek kaliteli müziğin yanı sıra Shutterstock ve Pond5 kesimleri dahil 20.000 saatlik lisanslı müzik kullandı. MusicGen’in Hugging Face AI üzerinden bir demosuna ulaşmak mümkün.

Müzik üretiminde yapay zekâ kullanımı süratle artıyor. Bundan birkaç ay evvel de Google, metinleri müziğe dönüştüren MusicLM isimli yeni yapay zekâ modelini duyurmuştu.