Interaktive Medien

Pepper’s Ghost Kristalle


Es gab den Wunsch eine möglichst überzeugende, Mensch-ähnliche Interaktion mit einer Maschine zu kreieren um Gerkzeuk zu personifizieren. Die (pseudo-)holografische Darstellung durch den Pepper’s Ghost Effekt ist hiervon ein Aspekt, ein Kristall ist ebenfalls ausgestattet mit Kamera, Mikrofon, Lautsprecher sowie Microcomputer.
Mein Nachdenken über das Simulieren von Aspekten menschlicher Erscheinung und Interaktion im Rahmen meiner Beschäftigung mit künstlicher Intelligenz seit 2015 hatte durch ihre technische Umsetzung in diesem Teilprojekt die größte konkrete Intensität.


Der Kopf eines virtuellen Humanoids als Persona von, und im Kristall angeschlossen an Gerkzeuk, zu sehen gewesen auf der Ausstellung ALLEZ ALLEZ

Softwareseitig wurde experimentiert mit:
OpenFace – Gesichtserkennung. Deep-Learning gestützte Möglichkeit für den Computer, Gesichter zu erkennen, voneinander zu unterscheiden, Namen zuzuordnen und sich an sie zu erinnern.
Affdex – Ausdruckserkennung. Möglichkeit für den Computer, Gesichtsausdrücke des Betrachters ausgehend der 7 Grundemotionen zu deuten.
SpeechRecognition – Möglichkleit der Spracherkennung, Experimente in den Bereichen Stichwort-Erkennung und Grammatik-Analyse mit dem “Natural Language Toolkit”.
ChatterBot – Machine-Learning gestütztes Dialog-system womit ein Computer die Wortwahl des Betrachters / Partizipienten erlernen und im Dialog wiedergeben kann.
Watir Webdriver – Möglichkeit für den Computer, selbstständig das Internet zu benutzen, funktioniert Google Translate zu Text-zu-Sprache-Programm um.
Unity – Game Engine, in der die Module zusammen kommen.

Weitere Designideen aus dem Arbeitsprozess:

 

pfeffergeist_17_01