Metinden videoya dönüştüren yapay zeka sınırlarını aşarak ilerliyor

Metinden videoya yapay zekalar geliyor

Runway’i daha önce hiç duymadıysanız firma, arka plan kaldırma ve poz algılama gibi yapay zeka araçlarında uzmanlaşmış web tabanlı bir video düzenleyici sunuyor. Şirket ayrıca metinden görüntüye AI modeli olan Stable Diffusion'ın geliştirilmesine yardımcı oldu ve ilk AI video düzenleme modeli Gen-1'i Şubat ayında duyurdu.

Gen-1, mevcut video çekimlerini dönüştürmeye odaklanmıştı ve video girdisini istemde belirtilen kısa bir animasyona çevirebiliyordu. Örneğin üstteki klipte, karton ambalaj görüntüleri endüstriyel bir fabrika görüntüsüyle eşleştirilerek storyboard veya daha gösterişli bir film sunumu için kullanılabilecek bir klip oluşturulmuş.

Ayrıca Bkz.Sinema dünyasında yapay zeka devrimi: Sürükle bırak ile CGI efektleri yapılacak

Sonuçlar büyüleyici

Gen-2 ise sıfırdan video oluşturmaya daha fazla odaklanmış gibi görünüyor, ancak dikkat edilmesi gereken birçok uyarı var. Birincisi, Runway tarafından paylaşılan demo klipler kısa, dengesiz ve kesinlikle fotogerçekçi değil. Ayrıca erişim şimdilik oldukça sınırlı. Denemek isteyen kullanıcılar Runway'in Discord'u aracılığıyla Gen-2 için bir bekleme listesine kaydolmaları gerekiyor. Öte yandan şirket sözcüsü Kelsey Rondenet, Runway'in önümüzdeki haftalarda geniş erişime açılacağını söyledi. Gen-2 ile birlikte stelizasyon, film şeridi, render görüntüleri yapılabildiği gibi metin+resim girdisinden video da yapılabiliyor.

"Bir gözün yakın çekimi."

"Bir dağ manzarasının havadan çekimi"

"New York'taki bir dairenin penceresinden gün batımı"