wir blicken in die Büchse der Pandora" - Wie MM Labs Black Mirror in die Realität holt

Wenn Sie sich für Technik interessieren, haben Sie wahrscheinlich schon die eine oder andere Folge von Black Mirror gesehen, der äußerst beliebten Netflix-Serie, die sich mit den unangenehmen Beziehungen zwischen Menschen und Technik befasst (und wenn Sie das noch nicht getan haben, sollten Sie damit anfangen). Das Drama spielt zwar in der nahen Zukunft, aber seine Stärke - und seine Fähigkeit, bei den Zuschauern Ängste auszulösen - beruht auf der Tatsache, dass die Fragen, denen es nachgeht, genauso gut auf die Gegenwart anwendbar sind.

Wenn Sie sich damit trösten, dass die erschreckende Technologie von Black Mirrornoch nicht verwirklicht wurde (oder nie verwirklicht werden wird), sollten Sie es sich nicht zu bequem machen: Die Zukunft ist jetzt, heißt es, und die verrückten Köpfe von MediaMonks Labs bringen eine Web-App heraus, die die Serie einen Schritt näher an die Realität bringt.

In der Episode "White Christmas" aus Staffel 2 bietet ein neuronales Implantat namens Z-Eye eine erweiterte Realitätsoberfläche im Sichtfeld des Benutzers. Zu seinen Funktionen gehört die Fähigkeit, andere Menschen im realen Leben zu blockieren, so dass sie als graue Silhouetten mit gedämpfter Sprache erscheinen. MediaMonks Labs hat sich von dieser Funktion inspirieren lassen und einen AR-Filter entwickelt, der den Körper des Nutzers ebenfalls als verpixelte Schwarz-Weiß-Form darstellt ( hierausprobieren - am bestenauf einem Tablet oder Laptop).

Sie ist zwar nicht ganz so fortschrittlich wie die in Black Mirrorgezeigte -zum Glück ist kein Implantat erforderlich, und sie funktioniert mit nur einer Person im Blickfeld -, zeigt aber, dass die in der spekulativen Fiktion vorgestellte Technologie näher an der Realität ist, als das Publikum vermuten könnte. In diesem Fall ist die Technologie so zugänglich, dass die Benutzer nur wenige Einstellungen vornehmen müssen, um damit zu spielen. "Das Tolle daran ist, dass es in Ihrem Browser und mit jeder handelsüblichen Webcam funktioniert", sagt Joe Mango, Creative Technologist bei MediaMonks Labs, der das Tool entwickelt hat. "Es ist anklickbar und jederzeit nutzbar

Alle ausblenden - kein Implantat erforderlich

Der Filter wird von BodyPix unterstützt, einem Open-Source-Modell für maschinelles Lernen, das die Segmentierung von Körperteilen ermöglicht. "Segmentierung" ist ein Prozess, bei dem eine Maschine ein Bild oder ein Video aufnimmt und die Pixel, die zu einer Person gehören, von denen, die nicht dazu gehören, trennt. Das ist die gleiche Idee, die hinter der Verwendung eines grünen Bildschirms steht, ein Bildschirm ist nicht erforderlich.

Das Besondere an BodyPix ist, dass es nicht nur einen Körper von seiner Umgebung trennt, sondern ihn auch in 24 spezifische Teile aufteilen kann, z. B. die linke Gesichtshälfte von der Rückseite des rechten Arms. Eine solche Technologie könnte verschiedene Anwendungen finden, z. B. die Erstellung präziser Augmented-Reality-Filter mit Körperverfolgung oder die Bildbearbeitung.

Mit BodyPix als zugrunde liegendem maschinellen Lernmodell ist das von den Labs entwickelte Body-Blocking-Tool keine TV-Magie. Und auch wenn die Technologie, mit der es funktioniert, ziemlich komplex ist, ist das Konzept hinter Body-Blocking relativ einfach.

Das von den Labs entwickelte Body-Blocking-Tool rendert formlose, verpixelte Körper in Echtzeit und ist keine Filmzauberei. Die Technik, die dahinter steckt, ist ziemlich komplex, aber das Konzept des Body-Blocking ist recht einfach und beruht auf der Bearbeitung zweier identischer Videoaufnahmen. Auf der einen Seite nimmt das Tool das Kameramaterial und wendet einen Shader an, der es verzerrt und verpixelt. Auf der anderen Seite wird eine separate Version des Videos segmentiert, um den Körper des Benutzers herauszuschneiden - so als ob man mit dem Zauberstab eines Bildbearbeitungsprogramms ein Objekt auswählen und löschen würde. Diese Version des Videos wird über die verzerrte Version gepresst, so dass ein verpixelter, schwarz-weißer Körper inmitten einer ansonsten normalen Umgebung erscheint.

Die Wissenschaft hinter der Science-Fiction aufspüren

Das Tool entspricht zwar nicht ganz der Technologie, die in der Serie zu sehen ist, aber die zugrundeliegenden Mechanismen können den Zuschauern helfen, eine Technologie zu verstehen und sich vorzustellen, die bisher vielleicht nur im Bereich der Science-Fiction möglich schien. Es zeigt auch, wie wertvoll der Versuch ist, das Unmögliche mit Hilfe modernster und neuer Technologien möglich zu machen.

"Es mag ungewöhnlich erscheinen, dass ein Kreativ- und Produktionsunternehmen wie MediaMonks so tiefgreifende technologische Untersuchungen durchführt", sagt Mango, aber diese Offenheit für Experimente kann Marken dabei helfen, neue Möglichkeiten zu finden, um Erfahrungen, die in ihrer Welt verfügbar sind, für Fans in unserer Welt zu reproduzieren. Als Mango zum Beispiel auf GitHub auf BodyPix stieß, "musste ich sofort an die Black Mirror-Episode denken"

Die Idee, auf der Software aufzubauen, um die verblüffende Z-Eyes-Funktion zu reproduzieren, war überraschend einfach: "Als ich [Head of Labs Sander van der Vegte] mit der Idee ansprach, sagte er: 'Das klingt cool, lass uns das machen'", erzählt Mango. "Kurz gesagt: Dank der offenen, kreativen Umgebung ist es so einfach, die Freigabe für ein Projekt zu bekommen." Aber wenn man bedenkt, dass Black Mirror oft eine Fallstudie für den problematischen Einsatz von Technologie ist, sollte man diese Experimentierfreudigkeit nicht als Leichtsinn betrachten. "Wir sind in der Lage, in die Büchse der Pandora zu schauen, um zu sehen, welche interessanten Möglichkeiten es gibt - und welche Fragen sie aufwerfen", sagt Mango.

Und das hängt damit zusammen, wie solche Projekte den Endnutzern helfen können, fiktive, futuristische Technologien, die sie in den Medien sehen, besser auf ihr eigenes Leben anzuwenden - und einige der ethischen Dilemmas, die spekulative Fiktion inspirieren, vorwegzunehmen oder zu bewältigen. Und natürlich sind solche Projekte auch einfach nur cool. Im Grunde genommen geht es darum, eine Verbindung herzustellen, die die Grenzen zwischen dem Realen und dem Imaginären aufhebt.