Yapay Zeka

Genie 4 sanal dünyalara ses kattı, karakterler konuşuyor

Google DeepMind, gerçek zamanlı etkileşimli dünya modeli Genie 4'ü tanıttı. Model ortam seslerini ve konuşan karakterleri simülasyonla birlikte üretiyor, erişim ise seçili test kullanıcılarıyla sınırlı.

Genie 4 sanal dünyalara ses kattı, karakterler konuşuyor

Model, simülasyon sırasında kullanıcıların metin komutu yazarak sahneyi değiştirebildiği, şimdiye kadarki en gerçekçi ve etkileşimli dünyaları üretiyor. Bu model bir video dosyası hazırlamıyor. Sahneyi kare kare hesaplıyor ve girdilere anlık tepki veriyor. Kullanıcılar klavyeyle sahnede dolaşabiliyor, olayları metinle yönlendirebiliyor.

Ses ve diyalog aynı sahnede üretiliyor

Google, Genie 4'ü gerçek zamanlı çalışan ve sesi yerel olarak üreten ilk dünya modeli olarak tanımlıyor. Her ortamın kendi arka plan sesi var. Rüzgârın ağaçlardan esmesi ya da dalgaların kıyıya vurması gibi ortam sesleri, sahnenin kendisiyle birlikte oluşuyor.

Karakterler de sesli konuşabiliyor. Diyalog, kullanıcının girdilerine ve dünyadaki olaylara göre anlık olarak değişiyor; karakterler bu tepkiler üzerinden sohbet edebiliyor.

Fizik tarafında şirket, aerodinamik ve çarpışma gibi gerçek dünya fiziğini daha gerçekçi modellediğini belirtiyor. Şirkete göre en büyük sıçrama insan simülasyonunda yaşandı. Karakterler ortama doğal biçimde tepki veriyor ve gerçek zamanlı olarak yönlendirilebiliyor.

Gemini modelleri simülasyonu ayakta tutuyor

Genie 4, Gemini ailesinden beslenen bir mimariye sahip. Gemini Omni, simülasyonları gerçek dünyadaki görünüm ve davranışlara bağlarken diğer Gemini modelleri sahnenin tutarlılığını ve sürekliliğini korumak için gereken akıl yürütmeyi sağlıyor.

Çok adımlı olaylarda işi bir yönlendirici model üstleniyor. Gemini 3.8 Flash, karmaşık olayları yöneten bir rehber ajan olarak döngünün içinde çalışıyor.

Şirket modeli erken dönem bir deneysel çalışma olarak tanımlıyor. Uzun simülasyonlarda, birden fazla karmaşık istem düzenlemesinden sonra ya da dolaşırken görsel ayrıntılar ve nesnelerin kalıcılığı değişebiliyor. Genie 4, sahneyi en fazla iki dakika tutarlı tutabiliyor; bu süre önceki modelin iki katı.

Kimler deneyebilecek?

Şu an tablo başka: Genie 4, güvenilir test kullanıcılarına açılmış bir araştırma önizlemesi olarak sunuluyor ve ilk olarak Google AI Ultra aboneleri için Project Genie üzerinden dağıtılıyor. Gemini API ve Google AI Studio'nun erken erişim ortakları da bu kapsamda yer alıyor. Bu gruplara Genie 4'ün yakında erişime açılacağı belirtiliyor. Şirket bu gruplar için bir tarih açıklamadı.

Test kullanıcıları modeli film ön görselleştirmesi ve oyun prototiplemesi gibi alanlarda deniyor. Testerlar film ön görselleştirmesi, arşiv fotoğraflarını dinamik simülasyonlara dönüştürme ve oyun geliştirmede hızlı prototipleme gibi uygulamaları inceliyor. Türkiye'deki kullanıcılar için bir erişim takvimi ise açıklamada yer almıyor.

Kaynaklar: Google DeepMind · Google Blog · TechCrunch · Unite.AI

Görsel: JESHOOTS-com / Pixabay