Treffen Sie Ihr digitales Double: Wie Metahumans die Personalisierung verbessern

Seit seiner Einführung im Jahr 2021 hat der MetaHuman Creator von Epic Game, eine Cloud-basierte App für die Entwicklung digitaler Menschen, seine Möglichkeiten um neue Funktionen erweitert - wie etwa Mesh to MetaHuman. Mit Hilfe der Unreal Engine bietet dieses Plugin eine neue Möglichkeit, einen MetaHuman aus einem 3D-Charakter-Mesh zu erstellen, so dass Entwickler Scans von echten Menschen importieren können. Mit anderen Worten, es macht es einfacher, ein virtuelles Double von sich selbst (oder einer anderen Person) fast sofort zu erstellen.

Inspiriert von diesem bedeutenden Update und unserer Tradition folgend, Produktions-Workflows mit der Unreal Engine zu verbessern, beschloss unser Team von engagierten Experten, einen eigenen Prototyp zu bauen. Dabei haben sie natürlich einiges gelernt - von den praktischen Möglichkeiten von Metamenschen bis hin zu den technischen Aspekten der Bewegungserfassung. Hier erfahren Sie, was Sie wissen müssen, um das volle Potenzial virtueller Menschen auszuschöpfen, wie die Experten selbst erklären.

Überall gleichzeitig sein - zumindest virtuell.

Wenn Sie schon immer davon geträumt haben, sich selbst zu klonen, um all Ihren Verpflichtungen nachkommen oder Ihre anstehenden Aufgaben erledigen zu können, dann sind Metamenschen vielleicht genau das, wonach Sie gesucht haben. Zumindest virtuell. Als digitale Repräsentanten bereits existierender Personen bieten Metamenschen unendliche Möglichkeiten in Bezug auf die Erstellung von Inhalten, den Kundendienst, den Film und die Unterhaltung im Allgemeinen. Natürlich können sie nicht Ihr Geschirr abwaschen - zumindest noch nicht -, aber wenn Sie zufällig eine öffentliche Person sind oder mit ihnen zusammenarbeiten, ist das ein Wendepunkt.

Durch das Verleihen von Bildrechten an ihre digitalen Doppelgänger kann jeder Influencer, Prominente, Politiker oder Sport-Superstar gleichzeitig (digital) auftreten und mehr kommerzielle Auftritte annehmen, ohne am Set sein zu müssen. John Paite, Chief Creative Officer von Media.Monks India, erklärt: "Prominente könnten ihren Metamenschen für Social-Media-Posts oder kleinere Werbeaufgaben einsetzen, für die sie normalerweise keine Zeit hätten." In ähnlicher Weise müssen Marken, die mit Influencern und Prominenten zusammenarbeiten, nicht mehr um deren vollen Terminkalender herum arbeiten.

Tatsächlich gibt es virtuelle Influencer bereits - allerdingsin Form von fiktiven Charakteren und nicht als digitale Doppelgänger von Menschen. Sie bilden Gemeinschaften, gehen Partnerschaften mit Marken ein und sind in der Lage, direkt und gleichzeitig mit Millionen von Fans in Kontakt zu treten. Außerdem sind sie nicht an einen Ort gebunden und unterliegen keinen zeitlichen Beschränkungen. In dieser Hinsicht kombinieren die digitalen Doppelgänger von Prominenten die Vorteile virtueller Menschen mit der Anziehungskraft einer realen Person.

Eine neue Grenze der Personalisierung und Lokalisierung.

Da die Arbeit mit virtuellen Menschen zeitsparender sein kann als die Arbeit mit realen Menschen, bieten sie wertvolle Möglichkeiten zur Personalisierung und Lokalisierung. Ähnlich wie wir die Unreal Engine nutzen, um relevante kreative Inhalte schnell und in großem Umfang zu liefern, hebt MetaHuman Creator die Lokalisierung auf eine neue Ebene. Rika Guite, Senior Designer, erklärt: "Wenn in einem Werbespot zum Beispiel eine Person auftritt, die in einer bestimmten Region eine Berühmtheit ist, kann die Marke sie mit dieser Technologie leicht durch eine Person ersetzen, die in einem anderen Markt besser bekannt ist, ohne zum Set zurückkehren zu müssen."

Aber nicht alles dreht sich um Berühmtheiten. Auch Metamenschen sind im Begriff, die Bildungslandschaft zu verändern, ebenso wie viele andere Bereiche. "Wenn man Metamenschen mit künstlicher Intelligenz kombiniert, wird daraus ein Kraftpaket", sagt Paite. "Schon bald werden Metamenschen personalisierte Kurse unterrichten, und die Studenten werden diese zu einem niedrigeren Preis nutzen können. So weit sind wir noch nicht, aber wir werden es schaffen"

Für makellosen Realismus ist die menschliche Note der Schlüssel.

Um zu testen, wie weit Metamenschen gehen können, hat unser Team unseren APAC Chief Executive Officer, Michel de Rijk, mit Hilfe von Photogrammetrie mit Epic Games' Reality Capture gescannt. Diese Technik arbeitet mit mehreren Fotos aus verschiedenen Winkeln, Lichtverhältnissen und Blickwinkeln, um die Tiefe jedes Subjekts wirklich zu erfassen und die Basis für einen realistischen Metamenschen-Modus zu schaffen. Anschließend importierten wir die Geometrie in MetaHuman Creator, die unsere 3D-Designer mit den Bearbeitungswerkzeugen der Plattform verfeinerten.

"Da man mit Mesh to Metahuman sein echtes Gesicht scannen und importieren kann, ist es viel einfacher, digitale Doppelgänger von echten Menschen zu erstellen", sagt unser Unreal Engine Generalist Nida Arshia. Dennoch ist der Input eines Experten notwendig, um qualitativ hochwertige Modelle zu erhalten. "Bestimmte Teile des Gesichts, wie zum Beispiel der Mund, können eine größere Herausforderung darstellen. Manche Gesichtsstrukturen sind auch schwieriger als andere. Wenn man will, dass der Metamensch wirklich realistisch aussieht, muss man einige Zeit auf die Verfeinerung verwenden."

Nachdem wir unseren Prototyp so weit wie möglich perfektioniert hatten, setzten wir die FaceWare-Technologie zur Erfassung von Gesichtsbewegungen ein, um Gesichtsanimationen in Echtzeit zu erstellen. Obwohl FaceWare aufgrund seiner vielfältigen Anpassungsmöglichkeiten das Tool unserer Wahl für dieses spezielle Modell war, gibt es je nach Budget, Zeitplan und zu animierendem Körperteil unterschiedliche Optionen. LiveLink von Unreal zum Beispiel bietet eine kostenlose Version, mit der Sie Ihr Telefon verwenden können und mit der sich sowohl Echtzeit- als auch aufgezeichnete Anwendungen leicht umsetzen lassen, konzentriert sich aber nur auf Gesichtsanimationen. Mocap-Anzüge mit externen Kameras ermöglichen die Erfassung von Ganzkörperbewegungen, allerdings mit mittlerer Genauigkeit, und die Aufnahme eines echten Menschen in einem speziellen Mocap-Studio ermöglicht äußerst realistische Animationen für Gesicht und Körper.

Gleichzeitig sollte die Umgebung, in der der Metamensch leben soll, berücksichtigt werden, da Kleidung, Haare, Körperbau und Gesichtsstruktur entsprechend angepasst werden müssen. Natürlich kann sich unterschiedliche Software besser an den einen oder anderen Stil anpassen.

Auch wenn diese Technologie noch in den Kinderschuhen steckt und ein gewisses Maß an Fachwissen erfordert, können Marken damit beginnen, verschiedene Möglichkeiten zur Nutzung von Metamenschen zu erforschen und Zeit, Geld und Ressourcen bei der Erstellung von Inhalten, dem Kundenservice und der Unterhaltung zu sparen. In ähnlicher Weise können Kreative ihre Fähigkeiten verbessern und mit Marken zusammenarbeiten, um den Bereich der Möglichkeiten zu erweitern. Arshia sagt: "Wir müssen in unserem Streben nach Realismus weiter vorankommen, indem wir uns darauf konzentrieren, die Vielfalt der verfügbaren Hauttöne, Hauttexturen und Merkmale zu erweitern, damit wir eine Zukunft aufbauen können, in der jeder akkurat dargestellt werden kann."