NVIDIA otwiera swojego animatora twarzy AI Audio2Face dla wszystkich deweloperów

NVIDIA zdecydowało się udostępnić swoją technologię Audio2Face jako open-source, co pozwoli studiom każdej wielkości na korzystanie z zaawansowanego systemu animacji twarzy. Umożliwia to tworzenie bardziej realistycznych i wiarygodnych postaci bez ogromnych kosztów tradycyjnego przechwytywania ruchu twarzy.

Wcześniej takie narzędzia były głównie dostępne dla dużych korporacji gier. Teraz nawet małe niezależne zespoły mogą łatwo zintegrować tę technologię w swoich projektach. Audio2Face przekształca standardową mowę audio w realistyczną animację twarzy w czasie rzeczywistym, synchronizując ruchy warg z dialogiem i nawet przekazując emocje postaci — od radości po zaskoczenie.

Wydanie open-source obejmuje nie tylko podstawowe SDK, ale także wtyczki do popularnych silników gier, takich jak Unreal Engine 5 i Unity. Ponadto, deweloperzy zyskają dostęp do frameworków szkoleniowych i bibliotek z gotowymi przykładami. Szczególnie interesującym komponentem jest Audio2Emotion, które analizuje intonację głosu, aby automatycznie określić emocjonalny ton mowy i odzwierciedlić go na twarzy postaci.

Wśród pierwszych studiów, które już testują tę technologię, są Codemasters, GSC Game World i NetEase. Otwarty dostęp do takich rozwiązań może przyspieszyć rozwój gier, w których interakcje z postaciami niegrywalnymi (NPC) stają się znacznie bardziej naturalne. Może to oznaczać koniec drewnianych wyrazów twarzy i robotycznych dialogów, z NPC reagującymi na słowa gracza żywymi, choć generowanymi przez AI, wyrazami twarzy.

Ważna uwaga: Technologia jest częścią większej platformy NVIDIA ACE, która jest dostosowana do sprzętu firmy. Chociaż podobne funkcje teoretycznie mogłyby działać na GPU innych producentów, w praktyce NVIDIA prawdopodobnie zoptymalizuje swoje rozwiązania specjalnie dla swojego sprzętu. Udostępniając Audio2Face jako open-source, NVIDIA podejmuje znaczący krok w kierunku uczynienia zaawansowanej animacji AI standardem w branży, a nie wyłączną cechą projektów z dużym budżetem.