Hollywood’u rafine eden AI girişiminin içinde – her seferinde bir bomba

Hollywood ünlülerin aşırılığıyla ünlüdür, ancak Tinseltown skandal bir hoşgörüyü sıkı bir şekilde kontrol ediyor: küfür.

Yönetmen Scott Mann gerilim filmini çektikten sonra bu kısıtlamalarla karşılaştı dava. Film devi Lionsgate — en çok bilineni John Wick, Testerevesaire Açlık Oyunları franchise’lar – filmi ABD’de yayınlamak istiyordu. Ancak stüdyonun büyük sorunları vardı. Tam olarak otuz altı tanesi.

“Mann, Los Angeles’tan yaptığı bir video görüşmesinde TNW’ye “Çok fazla sikiş olduğunu söylediler” dedi.

Bütün bu f-bombaları itiyordu dava potansiyel izleyiciyi azaltacak bir R derecesine doğru. Güvenliği sağlamak için PG-13’ün erişim alanını genişletmesi gerekiyordu, bu küfürlerin gitmesi gerekiyordu.

AB teknolojisinin 💜’i

AB teknoloji dünyasından en son söylentiler, bilge kurucumuz Boris’ten bir hikaye ve bazı şüpheli yapay zeka sanatı. Her hafta gelen kutunuzda ücretsizdir. Şimdi kaydolun!

Söylemesi yapmaktan daha kolay. Yeniden çekimler bombaya mal olurdu ve post prodüksiyon büyüsü müstehcen kelimeleri temizleyemezdi. Şans eseri Mann’ın elinde başka bir numara daha vardı. İngiliz film yapımcısı sessizce, AI video düzenleme araçları geliştiren Flawless adında bir girişim inşa ediyordu. dava yeni bir saha testi sağladı: f-bombalarını daha nazik lakaplarla değiştirmek.

Mann, oyuncu kadrosundan daha anlaşılır laflar kaydetmelerini istedi. Ses hazır olduğunda Flawless sistemi çalışmaya başladı. Yazılım ilk önce oyuncuların yüzlerini dönüştürdü 3D modellere dönüştürün. Sinir ağları Daha sonra performansları analiz edip yeniden yapılandırdık. Yüz ifadeleri ve dudak hareketleri yeni diyalogla senkronize edildi.

Deney başarılı oldu. 36 f-bombanın tamamı iz bırakmadan değiştirildi. Yani neredeyse hepsi. Mann, “Sonunda bir sikiş yaptım” diyor. “Görünüşe göre bir sikişme iznim var.”

Onun bu tutuculuğundan memnun olan derecelendirme kurulu, dava imrenilen PG-13. Film, gişe rekorları kıran bir hit oldu rapor edilen Sadece 3 milyon dolarlık bir bütçeye karşılık 21 milyon dolar. Filmin devamı şu anda Tayland’da çekiliyor.

Başarısından keyif alan Mann, yazılımı ticarileştirmeye başladı. En son sürüm, diyaloğu ve performansları geliştiren bir yapay zeka aracı olan DeepEditor’dur.

Stüdyo sistemi

DeepEditor satırları kırpabilir, duraklamalar ekleyebilir veya teslimatı yeniden zamanlayabilir. Hatta performansları bir çekimden diğerine kopyalayıp yapıştırabilir. Tüm çıkışlar Hollywood kalitesinde 4K çözünürlük, 16 bit renk derinliği ve ACES renk alanları sunar.

Aracın erken erişim uygulamaları artık açık. Bu yılın ilk yarısında tam bir ürünün piyasaya sürülmesi planlanıyor.

Mann, “İnsanların ateş ettiği yerler zaten yaşlanıyor” diyor. “Ve yayıldıkça film yapma şeklimizi tamamen değiştireceğini düşünüyorum.”

Ayrıca insanın filmleri dönüştürmek istediği tek araç da bu değil. Yaklaşık on yıl önce film yapımı için başka bir yapay zeka sistemi geliştirmeye başladı. DeepEditor gibi, hayatına bir Hollywood setinde başladı.

Büyük mola

Mann, sinema okulunda, İngiliz televizyonunda ve kısa filmlerde eğitim gördükten sonra 2014’te Hollywood’a büyük çıkışını yaptı. Lionsgate ona polisiye gerilim filmi için yönetmen koltuğu teklif etmişti. Soygun. Robert De Niro’nun liderliğindeki yıldızlardan oluşan bir kadro da gemideydi.

Mann bu deneyimin tadını çıkardı. “Bu tam bir ayrıcalıktı. Filme çok yaklaşmıştık ve İngilizce versiyonundan gerçekten çok memnunduk. Ama sonra filmin yabancı çevirisini gördüm.”

Adam dublaj karşısında “dehşete düştü”. Senaryosu yeniden yazılmış ve oyuncuların jestleri değişmişti. Suçlunun tüm sektöre yayılmış olduğunu keşfetti.

Sorun Hollywood’un yerleşik çeviri sürecinden kaynaklanıyor. Filmlere dublaj yapılırken senaryolar genellikle orijinal ağız hareketlerine uyacak şekilde yeniden yazılır. Yeni satırlar hâlâ eski jestlerle eşleşmiyorsa seslendirme sanatçıları, iletimlerini doğal olmayan yönlere çevirerek ikisini senkronize edin. Sonuçlar eğlenceliden çileden çıkarıcıya kadar değişir.

Mann, “Bu, yapımcılar ve oyuncular için gerçekten kötü çünkü bu onların çalışmalarının özgün bir temsili değil” diyor. “Ve bir deneyim olarak, eşzamanlılık içinde değilsen, içine dalmış sayılmazsın.”

Mann yeni dublaj tekniklerini araştırmaya başladı. Kafa taramalarını araştırdı ancak görüntü gerçekçilikten yoksundu. Dublaj tekinsiz bir vadiden diğerine taşındı.

Yerleşik VFX’e olan inancını kaybeden Mann, film endüstrisinin ötesinde arayışlara başladı. Çok geçmeden umut verici bir alternatifle karşılaştı: Derin video portreleri.

Hollywood GenAI ile tanışıyor

2018’de tanıtılan Deep Video Portraits, yeni ortaya çıkan üretken yapay zeka sektörü için büyük bir atılımdı. Bu teknik, yalnızca bir giriş videosu kullanarak yüzlerin fotogerçekçi bir şekilde yeniden canlandırılmasına olanak tanıyor. Daha sonra her yüz hareketi ve dudak hareketi konuşmayla senkronize edilebilir.

Gerçeğe yakın sonuçlar, Mann da dahil olmak üzere gözlemcileri hayrete düşürdü. “Aklımı başımdan aldı” diyor.

Mann araştırma ekibine ulaştı. Yeni bir teknik test üzerinde işbirliği yapmaya karar verdiler: De Niro’nun karakterinin Almanca konuşmasını sağlamak.

Mann, dönüşümün “sihir gibiydi” olduğunu söylüyor.

“Belirli bir aktörün belirli bir cümleyi nasıl söyleyebileceğini gerçekten anlamaktı… Performansı korursunuz ancak eşzamanlılığı değiştirebilirsiniz.”

Mann, tekniğin Hollywood için ideal olduğuna inanıyordu. Fikri bir işe dönüştürmek için teknoloji sektörünün duayenlerinden Nick Lynes’ten tavsiye aldı. İkili, 2018’de Flawless’ı birlikte kurdu.

Girişimin ilk ürünü, stüdyoların Hollywood filmlerine uyguladığı bir dublaj aracı olan TrueSync’ti. Bunların arasında Venom: Son Dansgeçen yıl vizyona giren bir Marvel gişe rekorları kıran film.

Kusursuz ayrıca şunları da sergiledi: cızırtılı makara Bu yılki Cannes Film Festivali’nin yapay zeka tarafından çevrilmiş fragmanları. Yine de her müşteri sonuçlarla övünmeye hazır değil.

Tehdit edici eylemler

Sonbaharın galası yaklaşırken Lionsgate tedirgin olmaya başladı. GenAI o zamanlar hâlâ yeni bir terimdi ancak sendikalar zaten sanatçılara yönelik tehditlerden endişe duyuyordu. Stüdyo, filmin görsel dublajının tepkiye yol açacağından korkuyordu.

Mann, “Eğer bu konu Screen Actors Guild ile çözülmezse ve büyük gerginlikler yaşanırsa, filmi yayından kaldıracaklardı” diye anımsıyor Mann. “Fakat şans eseri izin iş akışlarını ve (hakların korunmasını) erkenden planlamıştık.”

Planı kusursuz bir şekilde birkaç sütun üzerine inşa etti. Tüm veriler, birçok GenAI firmasının yaptığı gibi izinsiz olarak kazınmak yerine, meşru kaynaklardan elde edilecek. Her çıktı tamamen haklardan arınmış olacaktır. Oyunculuk orijinal performanslara sadık kalacaktı. Herhangi bir önemli değişiklik ek onay gerektirecektir.

Başlangıç ​​aynı zamanda sistemin işlemlerini de kısıtladı. Mann, “Modellerimizi sıklıkla ‘dar modeller’ olarak adlandırıyoruz” diyor. “Bunlar büyük ama belirli bir noktaya odaklanmışlar ve amaca göre seçilmişler. Oldukça hedef odaklılar ve bu amaç için kullanılabilecek temiz verilere dayanıyorlar.”

Flawless, planı Screen Actors Guild’e (SAG) sundu. Mann, “Onlar bunu olumlu karşıladılar” diyor. Ağustos 2022’de Fall, ABD’de sinemalarda gösterime girdi. Film ve dublaj büyük başarı elde etti.

Sadece birkaç ay sonra GenAI ana akım haline geldi. Tetikleyici, ChatGPT’nin Kasım ayındaki lansmanıydı. Bunu bir görüntü, metin ve ses oluşturucu dalgası yakından takip etti. Yapay zekanın oyunculara, sanatçılara ve telif haklarına yönelik tehditleri aniden kamuoyunun endişesi haline geldi.

Başka bir çekim

Temmuz 2023’te SAG-AFTRA aktörler sendikası tarihinin en uzun grevine başladı. Loncanın en önemli endişelerinden biri yapay zekanın oluşturduğu tehditti.

Aylar süren yoğun görüşmelerin ardından sendika, Hollywood’un en iyi şirketleriyle anlaşmaya vardı. Altında anlaşma“büyük ölçüde senaryoda yazıldığı, gerçekleştirildiği ve/veya kaydedildiği gibi” olmadığı sürece, herhangi bir dijital değişiklik açık izin gerektirir.

Mann şartları memnuniyetle karşıladı. Yabancı dilde dublaj için dudak senkronizasyonunu engellemeyecekler, ancak senaryoda veya performanslarda herhangi bir anlamlı değişiklik için katı izin gerekliliklerini uygulayacaklar.

Yeni kurallar Flawless’a iş fırsatları sundu. Yeni girişim, sendika düzenlemelerini destekleyerek Hollywood’da hızla ilgi çekmeyi umuyor.

SAG-AFTRA grevinin başlamasından bir ay sonra Flawless, yeni bir hak yönetimi platformunu açıkladı. Sanatsal Haklar Hazinesi (ART) olarak adlandırılan sistem, yapay zeka tarafından oluşturulan düzenlemeleri sanatçılarla paylaşıyor. Oyuncu değişiklikleri onaylarsa uygulama içinden onay verebilir. Yeni versiyonları beğenmezse kendi çekimlerini gönderebilir.

ART artık DeepEditor’a eklendi. Mann, yapay zeka düzenleme ve güvenlik önlemlerinin birleşiminin benzersiz bir ürün yarattığına inanıyor. “DeepEditor piyasadaki ilk meşru kurumsal yapay zeka çözümü olacak” diyor. “Diğer her şey tartışmalar ve hak sorunlarıyla dolu.”

Hollywood için daha iyi bir gelecek mi?

Mann, zamanla GenAI’nin film yapımcıları için sonsuz fırsatlar yaratmasını bekliyor. Maliyetlerin azalmasını, angaryanın azalmasını ve giriş engellerinin azalmasını öngörüyor. Her şey planlandığı gibi giderse Hollywood özgünlüğe olan iştahını yeniden kazanacaktır.

Mann, “Bu sektörün gelişmesinin anahtarı yenilik yapmak ve yeniliği sorumlu bir şekilde benimsemektir” diyor.

Ancak onun bile sorumlu bir şekilde çalışma konusunda öğreneceği dersler var. Üretim sırasında dava Devamında insan tanıdık bir sorunla karşılaştı.

““Kazara yine çok fazla sikik yazdım,” diye iç çekiyor. “Konuşmamız gerekiyordu: bir f*k’ye iznimiz var o yüzden bunu akıllıca kullanalım.”