Vor nicht allzu langer Zeit traf sich Andy Wood, CEO eines englischen Unternehmens namens Cubic Motion, in Los Angeles, um seine Technologien einigen Softwarehäusern vorzustellen.
Um die Fähigkeiten von Cubic Motion zu demonstrieren, hatte das Team ein Video mit einem vom Grafikteam erstellten Charakter präsentiert, einer Art Mensch-Tier-Hybrid.
Die Szene war sehr beliebt, und als es Zeit war, das Ass fallen zu lassen, passierte die Magie: Die Figur wandte sich plötzlich der Kamera zu und begann live mit den Anwesenden zu sprechen.
Was passiert ist?
Es war keine vollständig aufgenommene Szene. Nach einer vorher festgelegten Präambel wurde der Charakter in Echtzeit von einem Darsteller auf der anderen Seite der Welt in Manchester „geführt“.
Der Effekt war unglaublich. Ein Videospielcharakter, der so realistisch wie eine Person ist und in Echtzeit durch das Netzwerk geführt wird. So etwas hätte Wochen gedauert und bis vor kurzem ein paar Minuten außer in Echtzeit aufgezeichnet.
"Ich habe noch nie eine solche Reaktion gesehen", sagte Wood und erinnerte sich an die Episode. „Überall im Raum war Ehrfurcht. Jemand hielt meinen Arm und versuchte, Überraschung und Unglauben über das auszudrücken, was er sah. “
Eine totale Wende
Um zu verstehen, wie wichtig dies ist, müssen Sie einen Schritt zurücktreten und verstehen, wie die Bewegungserfassung derzeit funktioniert. Die Schauspieler, die die Charaktere "leiten", sind viel früher registriert: Ihre Anzüge werden von Dutzenden kleiner LEDs abgedeckt, mit denen Sie die Bewegungen erfassen können. Sie werden Marker genannt. Sobald alle Arten von Bewegungen aufgezeichnet wurden, "verbinden" die Animatoren die Punkte buchstäblich, bis sie etwas erstellt haben, das einer realistischen Bewegung ähnelt.
Der Ansatz von Cubic Motion ist radikal anders. Das Unternehmen hat eine Technologie entwickelt, die vollständig auf Marker verzichtet und Bewegungen sofort in Renderings mit 60 Bildern pro Sekunde übersetzt. All dies ist dank komplexer Algorithmen von möglich Maschinelles Lernen. Beispielsweise wird ein Gesicht in mehrere Teile zerlegt, und das System konvertiert nur die Teile, die sich tatsächlich in Echtzeit bewegen, ohne alles neu zu berechnen. Dieser Prozess garantiert auch beispiellose Details.
"Es gibt niemanden auf der Welt, der mit der Methode und den Details von Cubic Motion die Bilder eines Gesichts erhalten kann." er sagt stolz Holz.
Das Gollum-Ziel
Für diejenigen, die mit dem Charakter nicht vertraut sind (und ich frage mich wer), Gollum in Peter Jacksons preisgekrönter Filmtrilogie "Herr der Ringe" war das erste CGI-Produkt, das eine spürbare und emotionale Präsenz bot, die der eines echten Schauspielers ebenbürtig war.
Bei Cubic Motion haben sie nie ein Geheimnis daraus gemacht, Gollum als Prüfstein ihrer Arbeit zu haben, aber am Ende haben sie ihn übertroffen.
Als Andy Serkis Gollum spielte, musste er einen Anzug mit vielen Markern im Gesicht tragen. Es war ein großer Job, aber mit Einschränkungen. Sie können beispielsweise keine Markierungen auf Ihre Augen setzen. Sie können die Sprache nicht verfolgen und vieles mehr. Mit einer Vielzahl von Ausdrücken war die enorme Arbeit von Technikern und Animatoren erforderlich, um die Lücken zu schließen.
Nichts davon passiert mit Cubic Motion.
Das Traumteam
Cubic Motion steht an der Spitze eines sehr angesehenen Produktionsteams. Dazu gehören führende Computer- und Videospielunternehmen wie Epic Games, Tencent, 3Lateral und Vicon, die alles von hochauflösenden Scannern bis hin zu Grafik-Engines bereitgestellt haben.
Der Beitrag von Cubic Motion ist jedoch von grundlegender Bedeutung. Sein Beitrag brachte bisher getrennte Technologien zusammen.
"Wenn Sie die Essenz einer Person erfassen und auf eine digitale Figur übertragen können, haben Sie ein echtes Doppel produziert.". Die Qualität der Details und die Fähigkeit, jede ausdrucksstarke Nuance zu erfassen, werden die Spielregeln definitiv ändern.
Wie wird es verwendet?
Es ist nicht nur eine Frage von Kosten und Zeit: Cubic Motion öffnet sich einer Welt, in der das Bild von uns allen digitalisiert wird und virtuelle Umgebungen mit einem beispiellosen Detaillierungsgrad einnimmt. Die Wahrnehmung unserer Figur wird allgegenwärtig sein und die Grenzen von Zeit und Raum aufbrechen.
Virtuelle Termine mit einem Arzt für Konsultationen und Anfragen? Unabhängig von der Entfernung werden sie möglich sein. Interagieren Sie am selben Arbeitsplatz, indem Sie gemeinsam ein virtuelles Büro besetzen, während Sie sich jeweils in Ihrer Stadt, in Ihrem Land befinden? Idem. Gymnastik in einem virtuellen Fitnessstudio machen, für Personal Trainer die ohnehin schwerelose Version von uns haben, die uns ermutigt, wie sie zu werden. Viel mehr als ein Versprechen. Das Bild der Zukunft, das uns zeigt, wie wir es erreichen können.
Und wollen wir über virtuelle Assistenten sprechen? Eine VR-Version von Alexa oder Google Home mit dem Aussehen eines lieben Freundes, der uns bei der täglichen Arbeit hilft. Die Anwendungen sind endlos.
Die Cubic Motion-Technologie ist weit entfernt vom alltäglichen Verbrauch: Die Maschinen und Software des Unternehmens kosten Hunderttausende von Dollar. Cubic Motion hat jedoch eine Klasse von Produkten bereitgestellt, die für den Massengebrauch leichter zugänglich sind. Zum Beispiel hat er kürzlich Persona auf den Markt gebracht, seinen Face-Capture-Helm, der auch von anderen Unternehmen unter Lizenz verwendet werden kann.
Wie der Schriftsteller William Gibson sagte: Die Zukunft ist schon da, nur dass sie noch nicht gleichmäßig verteilt wurde.