Neue Nvidia-KI synchronisiert Sprachausgabe automatisch mit Gesichtsanimationen

[PCGH-Redaktion]

Jetzt ist Ihre Meinung gefragt zu Neue Nvidia-KI synchronisiert Sprachausgabe automatisch mit Gesichtsanimationen

Der Grafikhersteller Nvidia hat eine neue Künstliche Intelligenz namens Audio2Face entwickelt, die in Echtzeit detaillierte Animationen zu eingespeisten Audiodateien generiert. Die Software basiert dabei auf einem Deep-Neural-Network und funktioniert auch mit externen Tools wie der Unreal Engine 4.

Bitte beachten Sie: Der Kommentarbereich wird gemäß der Forenregeln moderiert. Allgemeine Fragen und Kritik zu Online-Artikeln von PC Games Hardware sind im Feedback-Thread zu veröffentlichen und nicht im Kommentarthread zu einer News. Dort werden sie ohne Nachfragen entfernt.

Zurück zum Artikel: Neue Nvidia-KI synchronisiert Sprachausgabe automatisch mit Gesichtsanimationen

 

[M1lchschnitte]

Cyberpunk 2077 hat so etwas auch benutzt:

JALI Research Inc.

For every character in our game, every character throughout our entire world, we’ve achieved high quality lip sync and expressed emotions with JALI. Mateusz Poplawski, Technical Character Director…

jaliresearch.com

Ist eine tolle Sache um Synchros in andere Sprachen lippensynchron zu bekommen und generell für Games mit vielen Characteren, die man nicht alle Mocapen kann.

 

[WeltbesterGabbyJay]

Plot-Twist:
AMD kopierts in nem Jahr, macht es Open Source, da nVidia es ja sowieso schon hat, und nVidia wird dann vorgeworfen, egoistisch zu sein.

 

[Acgira]

AMD kopierts in nem Jahr, macht es Open Source, da nVidia es ja sowieso schon hat, und nVidia wird dann vorgeworfen, egoistisch zu sein.

Beim maschinellen Lernen (Deep Learning) und K.I. ist AMD aber nicht nur ein Jahr hinten, sondern steht gefühlt noch immer bei Null. So wie ich das sehe ist FSR ein Upscaler ohne Learning und keine Kopie DLSS 1 oder 2.