Ein neues tragbares Gerät, das von Wissenschaftlern entwickelt wurde Cornell University ist in der Lage, die Mimik einer Person mit einem Sonar zu erfassen und als digitalen Avatar wiederzugeben. Das Vermeiden von Kameras könnte Datenschutzbedenken entschärfen.
EarIO, so heißt das Gerät, ist supereinfach. Es besteht aus einem Headset mit einem Mikrofon und einem Lautsprecher auf jeder Seite und kann an jedes normale Headset angeschlossen werden. Die Lautsprecher geben Schallimpulse außerhalb des menschlichen Hörbereichs wieder, und ihre Echos werden von Mikrofonen aufgenommen, genau wie ein Sonar funktioniert.
Die Echoprofile verändern sich je nach Gesichtsausdruck: Dafür erkennen entsprechend trainierte Algorithmen die vom Sonar empfangenen Variationen und übersetzen sie in Bilder.
EarlO, Sonar, das Dinge anhand von Geräuschen "sieht".
„Dank der Kraft der künstlichen Intelligenz baut unser Algorithmus komplizierte Verbindungen zwischen Muskelbewegungen und Gesichtsausdrücken auf, die Menschen nicht wahrnehmen können“, sagt er. Ke Li., einer der Co-Autoren der Studie. "Es kann verwendet werden, um sehr komplexe Informationen zu extrahieren: die der gesamten Vorderseite des Gesichts." Die Forschung wurde in der Zeitschrift veröffentlicht Tagungsband der Association for Computing Machinery zu interaktiven, mobilen, tragbaren und allgegenwärtigen Technologien. Und ich verlinke es dir hier.
Das Team testete das EarIO-Sonar an 16 Teilnehmern und führte den Algorithmus auf einem normalen Smartphone aus. Und das Gerät war in der Lage, Gesichtsausdrücke wie eine normale Kamera / Kamera zu rekonstruieren. Hintergrundgeräusche wie Wind, Gespräche oder Straßenlärm beeinträchtigten die Gesichtserkennung nicht im Geringsten.
Technik ab 007
Die Forscher weisen darauf hin, dass Sonar mehrere Vorteile gegenüber der Verwendung eines Sonars hat Kamera. Akustische Daten verbrauchen viel weniger Energie und Verarbeitungskapazität, sodass Sie kleinere und leichtere Geräte verwenden können. Kameras können auch viele zusätzliche persönliche Informationen sammeln, die Benutzer möglicherweise nicht teilen möchten, sodass Sonar möglicherweise sicherer ist.
Natürlich stelle ich mir, wenn ich der Fantasie freien Lauf lasse, eine solche Technologie vor, die lautlos in ein normales Headset "geschlüpft" ist, und ich denke, sie kann Lippenbewegungen und Gesichtsausdrücke aus der Ferne übertragen, sogar zu Überwachungszwecken. Diesmal sehe ich jedoch praktischere Verwendungen.
Die? Zunächst einmal die aus dem Videospielbereich: eine praktische Möglichkeit, körperliche Gesichtsausdrücke auf einem digitalen Avatar für Spiele, Virtual Reality oder das Metaversum nachzubilden. Nun arbeitet das Team daran, weitere Störungen auszuschließen, etwa wenn der Nutzer den Kopf dreht, und das Trainingssystem für den KI-Algorithmus zu vereinfachen.
Wir werden sehen. Das heißt zu hören. Kurz gesagt, Sie verstehen.
