Yeşil ekran ve Yapay zeka maskeleme: Hangisini kullanmalısınız?

Renk tabanlı anahtarlama (chroma keying): Yazılım, seçilen renge yakın her pikseli şeffaf hale getirir. Yeşil rengin kullanılmasının nedeni, insan ten tonlarından çok farklı olması ve kamera sensörlerinin yeşil kanalda en fazla ayrıntıyı yakalamasıdır. Bu basitlik, gücün kaynağıdır ve tüm klasik sorunların temel nedenidir:

• Aydınlatma her şeydir. Ekran düzgün bir şekilde aydınlatılmalıdır; kırışıklıklar, gölgeler ve parlak noktalar, anahtarlama yazılımının temiz bir şekilde kaldıramayacağı farklı yeşil tonlarına dönüşür. Pratikte ekranda iki ışık ve kendiniz üzerinde ayrı ışıklandırma kullanmanız gerekir.
• Yansıma (spill). Işık arka plandan yansır ve saçınıza, omuzlarınıza ve cildinize yeşil bir renk verir. Anahtarlama yazılımları yansımayı azaltma kontrollerine sahiptir, ancak yoğun yansıma (ekrana çok yakın durmak) asla mükemmel sonuç vermez.
• Yeşil giysi giyemezsiniz. Yeşil kıyafetler, yeşil aksesuarlar ve bazen de yeşilimsi gözler boşluklara dönüştürülerek anahtarlanır.
• Alan ve maliyet. Kullanılabilir bir kurulum için bir arka plan (kumaş veya kağıt), bir çerçeve veya duvar askısı ve en az iki yumuşak ışık gereklidir: gerçekçi olarak 80–300 € ve temiz tutmanız gereken birkaç metrekare alan gerekir. Kurulum ve sökme her oturumda zaman alır.

Karşılığında değerli bir şeye sahip olursunuz: ekranın önünde çalışan her şey (insanlar, evcil hayvanlar, ürünler, duman, cam eşyalar) için işleyen ve gerçek zamanlı çalışan bir anahtar. Bu nedenle, yayın hava durumu stüdyoları ve kalıcı bir kurulumu olan yayıncılar hala bunu kullanır.

Yapay zeka tabanlı maskeleme renkleri dikkate almaz; içeriğe odaklanır. Büyük miktarda insan görüntüsünden eğitilmiş bir sinir ağı, her karenin her pikseli için, bunun ne kadarının kişiye ait olduğunu tahmin eder (0 ile 1 arasında yumuşak bir alfa değeri, kesin bir evet/hayır değil). VideoBGNinja'nın temelindeki model olan Robust Video Matting (RVM), videolara önemli bir özellik ekler: zamansal izleme. Her karede tekrarlayan bir hafıza oluşturarak, bir an önce nerede olduğunuzu hatırlar. Bu sayede hareket ederken kenarların sabit kalmasını sağlar ve her karedeki fotoğraf kesitlerinde olduğu gibi titremeyi önler.

Pratik sonuçları:

• Sıfır kurulum gerektirir. Evinizde, ofisinizde veya dışarıda çekim yapabilirsiniz. Arka plan, aydınlatma ekipmanı veya yansımalarla uğraşmanıza gerek yok ve isterseniz yeşil giysiler giyebilirsiniz.
• Gerçekten iyi saç kenarları elde edersiniz. Model yumuşak bir alfa değeri ürettiği için, ince saç tellerinin kısmi şeffaflığı sağlanır; bu da iyi bir kroma anahtarına benzer ancak yeşil renkli yansımalar olmaz.
• Ek maliyet sıfırdır. Satın almanız gereken donanım yoktur. VideoBGNinja gibi araçlar, modeli bir GPU sunucusunda çalıştırır ve size ücretsiz olarak şeffaf bir WebM, yeşil ekranlı bir MP4 ve bir alfa maskesi sağlar.

Çoğu "Yapay zeka ile yapılan nesne ayırma işlemi berbat" şeklindeki şikayetlerin nedeni, aslında düzeltilebilecek bir çekim problemidir, yapay zeka modeli değil. En sık karşılaşılan sorunlar:

• Kenarlarda çerçeve boyunca titreme oluyor. Genellikle elde tutulan bir kamera kullanılıyor; bu durumda zamansal izleme sistemi en iyi şekilde sabit bir arka plan üzerinde çalışır. Telefonu herhangi bir sabit yüzeye koyun, böylece titremeler büyük ölçüde azalacaktır Saçlar bulanık veya gri görünüyor.
• Saç ve arkasındaki duvar arasında düşük kontrast var veya yeterli ışık yok. Bir lamba ekleyin ve duvardan uzaklaşın; bu, mükemmel aydınlatılmış bir yeşil ekranın hala üstün olabileceği tek alan. Görüntünün bazı kısımları kayboluyor.
• Koyu renk kıyafetler ile koyu renkli bir oda birlikte kullanıldığında arka plan olarak algılanıyor; bu nedenle ışığı artırın veya iki öğe arasında belirgin bir ton kontrastı oluşturun. Sonuç neredeyse boş görünüyor.
• Çerçevede net bir insan figürü yok veya konu, insan nesne ayırma modelinin yapabileceğinden daha fazlasını gerektiren bir nesne veya evcil hayvan. Bu durumlarda, yeşil ekran hala doğru araçtır. İlk denemede en iyi sonucu elde etme konusunda daha detaylı bir açıklama şu adreste:

Temiz bir şekilde kesilmiş bir görüntü için kendinizi nasıl çekeceğiniz 七.