Nvidia, yapay zeka destekli Audio2Face teknolojisini açık kaynak kodlu yaptı. Bu adım geliştiricilerin, öğrencilerin ve araştırmacıların bu teknolojiyi daha rahat kullanıp, yeni projeler yaratabilmesini sağlayacak.
Audio2Face teknolojisi açık kaynak oldu
Audio2Face, ses verilerini analiz ederek gerçekçi yüz ifadeleri ve dudak senkronizasyonları oluşturan bir yapay zeka modeli diyebiliriz. Bu araç, özellikle tonlama ve akustik verileri kullanarak animasyonlar üretiyor. Böylece, oyun karakterlerinden sanal müşteri temsilcilerine kadar birçok alanda doğal ve duygusal tepkiler verebilen avatarlar yaratılabiliyor.
Nvidia sadece modeli değil, aynı zamanda Audio2Face SDK’sını ve eğitim framework’ünü de açık kaynak topluluğuna açtı. Bu, geliştiricilerin mevcut modelleri kendi ihtiyaçlarına göre özelleştirmelerine imkan veriyor.
Audio2Face, zaten birçok oyun stüdyosu ve yazılım geliştiricisi tarafından kullanılıyor. Codemasters, GSC Game World, NetEase ve Perfect World Games gibi oyun geliştiricileri ile Convai, Inworld AI, Reallusion, Streamlabs ve UneeQ gibi yazılım sağlayıcıları bu teknolojiyi projelerinde kullanıyor.
Örneğin The Farm 51 şirketi, Chernobylite 2: Exclusion Zone oyununda bu teknoloji sayesinde animasyon çalışmalarında büyük zaman kazandığını belirtiyor.
Nvidia, bu gelişmeyle birlikte RTX Kiti için de önemli güncellemeler duyurdu. Yapay zeka destekli ışın izleme ve gerçekçi karakter üretimi sunan bu paket, yeni optimizasyonlarla güçlendirildi. RTX Neural Texture Compression SDK, büyük dokuların bellek kullanımını azaltırken görsel kaliteden ödün vermiyor.
