Lyra 2.0, NVIDIA tarafından geliştirilen ve tek bir giriş görüntüsünden uzamsal olarak kalıcı, keşfedilebilir 3B dünyalar üretebilen açık kaynak bir çerçeve olarak sunuluyor. Kullanıcılar sahneyi adım adım keşfederken sistem ardışık kamera hareketlerini sentezleyip gerçek zamanlıye yakın video oluşturabiliyor.
Nasıl çalışıyor?
İşlem bir adet giriş fotoğrafı ile başlıyor; kullanıcı daha sonra kamera yolunu tanımlayarak sahnede gezinmeyi sağlıyor. Lyra 2.0, ardışık görüntüler üretirken sahnenin mekânsal sürekliliğini korumaya odaklanıyor. Bu yaklaşım sayesinde oluşturulan videoların ortam öğeleri tutarlı kalıyor ve keşif süreci boyunca yeni açılar üretilebiliyor.
Ne sunuyor, nerede kullanılır?
Lyra 1.0 ve Lyra 2.0’nin uygulama kodları nv-tlabs/lyra GitHub deposunda açık kaynak olarak bulunuyor. Bu, geliştiriciler ve araştırmacılar için deney yapma ve entegre etme kolaylığı sağlıyor. Teknoloji oyun stüdyolarında hızlandırılmış prototipleme, sanal tur üretimi veya içerik oluşturma iş akışlarında prototip düzeyinde kullanılabilir. Araştırma raporlarına göre Lyra 2.0 video difüzyon tabanlı üretimle sahne sürekliliğini hedefliyor.
Pratik notlar
Lyra 2.0 bir ürün değil, açık kaynak araştırma ve uygulama çerçevesi olarak konumlanıyor; sonuçlar çalışma koşullarına bağlı olarak değişebilir. Kod ve örnekler resmi GitHub deposunda yer aldığı için ilgilenenler doğrudan kaynağa erişip kendi testlerini yapabilir. İlerleyen dönemde yapılan değerlendirmeler ve entegrasyonlar, teknolojinin hangi kullanım senaryolarına daha uygun olduğunu netleştirecektir.
Yorumlar(0)