Google'nin yapay zeka vide hazırlama uygulaması DeepMind'e yeni özellik daha eklendi. Artık fon müzikleri de ekleyebiliyorsunuz.
Google Veo ve OpenAI'nin Sora'sı gibi diğer video oluşturma araçlarıyla eşleştirilebilen videodan sese (V2A) teknoloji projesindeki ilerlemeyi paylaştı.
DeepMind ekibi, blog yazısında sistemin ham pikselleri anlayabildiğini ve bu bilgiyi metin istemleriyle birleştirip ekranda olup bitenler için ses efektleri oluşturabildiğini açıklıyor. Aracın, sessiz filmler ve diğer sessiz videolar gibi geleneksel çekimler için müzikler oluşturmak için de kullanılabileceğini belirtmek gerekir.
DeepMind'ın araştırmacıları teknolojiyi videolar, ses kayıtları ve seslerin ayrıntılı açıklamalarını ve diyalog metinlerini içeren yapay zeka tarafından oluşturulan açıklamalar üzerinde eğitti. Bunu yaparak teknolojinin belirli sesleri görsel sahnelerle ilişkilendirmeyi öğrendiğini söylediler. TechCrunch'ın belirttiği gibi DeepMind'in ekibi ses efektleri oluşturabilen bir yapay zeka aracı yayınlayan ilk ekip değil - ElevenLabs da yakın zamanda bir tane yayınladı - ve bu son da olmayacak. Ekip, "Araştırmamız, ham pikselleri anlayabilmesi ve metin istemi eklemenin isteğe bağlı olması nedeniyle mevcut videodan sese çözümlerden öne çıkıyor" diye yazıyor.
Metin istemi isteğe bağlı olsa da, son ürünü mümkün olduğunca doğru ve gerçekçi olacak şekilde şekillendirmek ve iyileştirmek için kullanılabilir. Örneğin çıktıyı istediğiniz sesleri oluşturmaya yönlendirmek için olumlu istemler veya istemediğiniz seslerden uzaklaştırmak için olumsuz istemler girebilirsiniz. Aşağıdaki örnekte ekip şu ipucunu kullandı: "Sinematik, gerilim, korku filmi, müzik, gerilim, ambiyans, beton üzerindeki ayak sesleri.
Kaynak:https://www.engadget.com/google-deepminds-new-ai-tech-will-generate-soundtracks-for-videos-113100908.html?src=rss&guccounter=1
