Dream Machine Luma Ai fotoğraflara hayat veriyor
Haziran 2024’ün başlarında Luma AI, fotoğraflardan ve metinlerden beş saniyelik gerçekçi videolar oluşturabilen Dream Machine adlı yeni bir sinir ağını tanıttı. Ancak aşırı yük nedeniyle hizmet şu anda aralıklı olarak çalışıyor. İzvestia makalesinde fotoğrafların nasıl “canlandırılacağı” ve hizmetin nasıl kullanılacağı hakkında daha fazla bilgi edinin.
Dream Machine: Nasıl bir hizmettir, neler yapabilir?
Hemen hemen her aktif İnternet kullanıcısı, yapay zeka (AI) uygulamaları kullanılarak oluşturulabilecek basit görüntüleri bilir. Ancak kaliteli videolar oluşturmak şimdiye kadar ulaşılması zor bir hedef olarak kaldı. AI videoları, karakterlerin yüz ifadelerinin olmayışı, fazladan vücut parçaları, dalgalanmalar veya çerçevedeki bir nesnenin konumundaki ani değişiklik nedeniyle kolayca tanımlanabilir. Videolar, farklı benzer resimlerden oluşan tek bir video serisi halinde birbirine yapıştırılmış gibiydi.
Ancak Luma AI ekibi tarafından oluşturulan ve Haziran 2024’te yayınlanan Dream Machine sinir ağı, oluşturulan videonun kalitesi ve ek seçenekler açısından diğer birçok sinir ağının ilerisindeydi. Böylece kullanıcılar özellikle eski aile fotoğraflarını “canlandırma” fırsatını beğendiler. İnternette eski aile fotoğraflarından insanların hareket etmeye başladığı videolar ortaya çıktı, ancak resim yüksek kaliteli ve pürüzsüz kaldı ve karakterler kareden kareye değişmedi.
Geliştiricilerin kendilerine göre Dream Machine, yüksek hızda doğru, tutarlı ve aksiyon dolu videolar oluşturabiliyor: “120 saniyede 120 kare.” Geliştiriciler ayrıca Dream Machine’in insanların ve hayvanların nasıl hareket ettiğini ve çevrelerindeki dünyayla nasıl etkileşime girdiğini anlamak üzere eğitildiğini de ekliyor. Bu sayede nesnelerin gerçekmiş gibi hareket ettiği gerçekçi videolar oluşturabiliyor.
Editörler bu ifadeleri pratikte doğrulayamadı: yoğun talep nedeniyle hizmet aralıklı olarak çalışıyor ve aslında deneme modunda çalışmıyor.
Genel olarak geliştiricilere göre sinir ağı şunları yapabilir:
— 5 saniye süren gerçekçi videolar oluşturun (sinematik, dramatik ve yumuşak hareketlerle);
— fotoğrafları ve metinleri videoya dönüştürün (talep İngilizce olarak verilir);
— kamera hareketini simüle edin.
Dream Machine sinir ağının sınırlamaları
Birçok modern sinir ağı gibi Dream Machine’in de dezavantajları vardır. Geliştiriciler bunların arasında dördünü not ediyor:
— nesnelerin dönüşümü. Bir sinir ağı her zaman kusursuz nesneler yaratamaz. Örnek olarak programın yaratıcıları, döndüğünde dönüşen hareketli bir arabadan bahsediyor: arka tamponun olduğu yerde ön tampon aniden beliriyor;
— hareket. Yapay zeka ayrıca eylemi karıştırabilir. Köpek koşmak yerine havada asılı kalabilir;
— metin. Videodaki metinler sinir ağları için hala büyük bir sorun olmaya devam ediyor. Dream Machine videoda bir tür metin oluşturabilir ancak bu metin ya okunamaz ya da yanlış yazılır;
— sözde Janus problemi (Antik Roma mitolojisinde iki yüzlü tanrı. – İzvestia). Bu soruna bir örnek olarak geliştiriciler, bir kutup ayısının dönüş sırasında aniden ikinci bir kafa çıkardığı bir video gösteriyor.
Fotoğraf: Getty Images/Tero Vesalainen
Tüm bu sorunlar yeni değil, bunları ortadan kaldırmak için talebinizi daha net bir şekilde tanımlamanız gerekiyor.
Dream Machine nasıl kullanılır?
Resmi olarak sinir ağı herkese açıktır. Bir resim oluşturmak veya “canlandırmak” için siteye kaydolmanız gerekir. Tek bir hesap altında ayda en fazla 30, bir günde ise en fazla beş ücretsiz video oluşturabilirsiniz. Bu yeterli değilse, ücretli bir abonelik var. Hizmetin aylık maliyeti yaklaşık 2 bin ruble (23,9 dolar) olacak.
Fotoğraf: IZVESTIA/Eduard Kornienko
Dream Machine, video oluşturmanın ve fotoğraflara hayat vermenin çeşitli yollarını sunar:
— metin açıklaması. Bunu yapmak için sinir ağına karede ne olması gerektiğini, eylemi, atmosferi ve duyguları ana hatlarıyla anlatmalısınız. Ayrıca karmaşık metin yapılarını ve jargonları kullanmaktan da kaçınmalısınız;
— ipuçları içeren metin açıklaması. Çerçevede görmek istediğiniz her şeyi nasıl tanımlayacağınızdan emin değilseniz bu yöntem kullanılmalıdır. Bu durumda sinir ağı sizin için her şeyi düşünecektir;
— videodaki resim. Hem kendi fotoğraflarınızı hem de sinir ağları kullanılarak oluşturulan fotoğraflarınızı yükleyebilirsiniz. Aynı zamanda programın daha kaliteli bir video oluşturabilmesi için metin açıklaması kullanmak da daha iyidir.
