LUMİERE NELER SUNUYOR?
Lumiere'in öne çıkan özelliklerinden biri, gerçekçi görünen ve dalgalanma içermeyen hareketler oluşturabilmesidir. Bu özellik, tüm video karelerini aynı anda oluşturan bir yazılım tarafından sağlanır, bu da kareleri kullanmak ve ardından hareketin nasıl olması gerektiğini öğrenmek için ayrı ayrı eğitim yapmaya gerek kalmaz.
Ayrıca Lumiere, görüntü oluşturmaya yardımcı olan yayılma olasılık modellerini kullanır. Bu, Uzay-Zaman U-Net ile birleştirilmiş bir durumu içerir. U-Net, görsellere eklenen dikkat blokajlarının yanı sıra zamansal olarak yukarı ve aşağı ölçeklendirmeyi de içeren bir mimari görevi görür.
Bu yeni üretken yapay zeka aracının diğer birçok modelle birlikte kullanılabilmesi en önemli özelliklerden biridir, bu da daha önce görülenlerden çok daha gerçekçi görünen görüntüler ve videolar oluşturmaya yardımcı olur.
Lumiere, aşağıdaki işlevler için kullanılabilir:
1. Sinemagraflar: Belirli bir görüntü bölümünün hareketlendirilmesi.
2. İç boyama: Bir videodaki bir nesnenin başka bir nesneyle değiştirilmesi.
3. Stilize nesil: Herhangi bir yaratımın sanat tarzının başka bir şeye dönüştürülmesi.
4. Resimden videoya: İstenilen bir resmin hareketlendirilmesine yardımcı olur.
5. Videodan videoya: Kullanıcıların farklı bir sanat tarzında videolar oluşturmasına olanak tanır.
Ancak, şu an için Lumiere'nin desteklediği video uzunluğu sadece 5 saniyeyle sınırlıdır. Ayrıca, video geçişleri ve çoklu kamera açıları oluşturma yeteneği henüz mevcut değildir. Ayrıca, Lumiere'i denemek isteyenlerin standart bir GPU ile bunu yapamayacaklarını belirtmek önemlidir.