Nvidia, yapay zeka dayanaklı Audio2Face teknolojisini açık kaynak kodlu yaptı. Bu adım geliştiricilerin, öğrencilerin ve araştırmacıların bu teknolojiyi daha rahat kullanıp, yeni projeler yaratabilmesini sağlayacak.

Audio2Face teknolojisi açık kaynak oldu

Audio2Face, ses datalarını tahlil ederek gerçekçi yüz tabirleri ve dudak senkronizasyonları oluşturan bir yapay zeka modeli diyebiliriz. Bu araç, bilhassa tonlama ve akustik bilgileri kullanarak animasyonlar üretiyor. Böylelikle, oyun karakterlerinden sanal müşteri temsilcilerine kadar birçok alanda doğal ve duygusal yansılar verebilen avatarlar yaratılabiliyor.

Nvidia yalnızca modeli değil, birebir vakitte Audio2Face SDK’sını ve eğitim framework’ünü de açık kaynak topluluğuna açtı. Bu, geliştiricilerin mevcut modelleri kendi gereksinimlerine nazaran özelleştirmelerine imkan veriyor.

Audio2Face, esasen birçok oyun stüdyosu ve yazılım geliştiricisi tarafından kullanılıyor. Codemasters, GSC Game World, NetEase ve Perfect World Games üzere oyun geliştiricileri ile Convai, Inworld AI, Reallusion, Streamlabs ve UneeQ üzere yazılım sağlayıcıları bu teknolojiyi projelerinde kullanıyor.

Örneğin The Farm 51 şirketi, Chernobylite 2: Exclusion Zone oyununda bu teknoloji sayesinde animasyon çalışmalarında büyük vakit kazandığını belirtiyor.

Nvidia, bu gelişmeyle birlikte RTX Kiti için de kıymetli güncellemeler duyurdu. Yapay zeka dayanaklı ışın izleme ve gerçekçi karakter üretimi sunan bu paket, yeni optimizasyonlarla güçlendirildi. RTX Neural Texture Compression SDK, büyük dokuların bellek kullanımını azaltırken görsel kaliteden ödün vermiyor.