Tag 1: "Me as a Robot" die MietzeMarie

Tag 2: Furhat - eigene Interaktionen bauen

Am 2. Tag lernten wir Furhat (Furhat Robotics) kennen und erhielten eine Einführung in Blocky um Interaktionen für den Furhat umsetzten zu können.

Nach der Installation der Furhat SDK setzten wir unsere Me as a Robot-Konzept zunächst in Blocky um. Blocky ist dabei eine grafische Oberfläche mit einen Baukasten-Steck-System, in dem man schnell - auch ohne Programmiererfahrung- eine Interaktion zum Beispiel für den Furhat umzusetzen.

Danach lernten wir Misty kennen, auch von Furhat Robotics, ein zum lernen eingesetzter sozialer Roboter, der sich allerdings auch autonom Bewegen kann.

Bild 1: Furhat; Bild 2: Misty und Emo

Wochenende

Am Wochenende befasste ich mich auf eigenen Antrieb mit der Programmierung mit Kotlin auf dem Furhat und wie man einen eigenen Skill erstellen kann.

Tag 3: Flowcharts

Am dritten Tag lernen wir verschiedene Arten von Flowchats, sowie die Vorteile dieser - vor allem in der gemeinsamen Projektarbeit und bei komplexen Projekten.

Nun sollten wir im Team ein eigenes Flowchat umsetzten, für unser eigenes Projekt auf dem Furhat. Dabei erstellten wir eine Swimlane Flowchat für unsere gesamte Konversation mit dem Furhat, mit allen Entscheidungspunkten und Random Antworten.

Tina und ich entschieden uns für eine Begrüßungs- und Vorstellungskonversation mit dem Furhat die auf Besucher, Lehrende und Studierende ausgelegt ist. Dabei sollte der Furhat entsprechende Fragen stellen und auf die jeweiligen Antworten der User eingehen können. Aber auch Humor war dabei ein wichtiger Punkt um die Konversation natürlich und unterhaltsam zu gestalten.

Ich entschied mich dabei, den Flowchart mit der Konversation in Kotlin in einem eigenen Skill umzusetzen und Tina in Blocky. Das würde gleich noch zeigen wo die Unterschiede liegen, ob man in beiden Varianten es schafft in der kurzen Zeit alles umzusetzen und ob es Unterschiede geben wird.

Tag 4 und 5: freies Arbeiten - Von Analog zu Digital – Planung der Implementierung

Danach ging es in die Umsetzung der einzelnen Gesprächsteile in Kotlin. Dabei stellte sich heraus, dass es von Vorteil ist, jeden Gesprächspart in einer eigenen Stage und somit auch Datei abzulegen. Das führt zu einem sehr übersichtlichen Projektordner für die Programmierung und wenn es zu mehreren Yes/No Fragen hintereinander kommt, nicht zu Problemen mit den programmierten Antworten des Furhats.

Die Herausforderung, Benutzerdaten wie Namen und Studiengang effektiv zu speichern und später im Dialog zu verwenden, blieb jedoch bestehen und erforderte kreative Lösungsansätze, um die Personalisierung ohne direkte Datenspeicherung zu ermöglichen.

Tag 6: Finalisierung und letztes Testen

In der finalen Phase der Programmierung arbeitete ich an der Implementierung von speziellen Gesten für den Furhat, um menschliche Mimiken wie das Lachen über die eigenen Witze zu simulieren oder auch leicht sarkastisches Grinsen. Leider waren diese Gesten wegen des Fehlens einer notwendigen Bibliothek, nicht nutzbar - sind aber im Code vorhanden und sobald die fehlende Bibliothek zum Furhat hinzugefügt wird nutzbar. Diese Gesten werden die Konversation mit dem Furhat individueller und sicherlich auch natürlicher machen.

Zum Abschluss des Projekts konnten wir trotz der technischen Herausforderungen ein Accessoire für den Furhat entwickeln, das dessen Erscheinungsbild aufwertet und seine Funktion als Begrüßungsroboter der FHP im InterfaceLabor oder der Designfakultät noch unterstreicht.

Tag 7 – Abschlusspräsentation

Am letzten Tag der Projektwoche nutzten wir die Gelegenheit, unsere Ergebnisse den anderen Teams und Betreuern vorzustellen. 

Tina ihren Umsetzung in Blocky und ich meinen Skill in Kotlyn. Die Präsentation gab uns die Möglichkeit, die erreichten Fortschritte zu demonstrieren und das Feedback der Zuhörer zu erhalten. Ich stellte auch die speziellen Gesten vor, die ich trotz technischer Einschränkungen implementiert hatten. Besonders betonten wir, wie die strukturierte Code-Organisation durch goto()-Anweisungen nicht nur die Übersichtlichkeit verbesserte, sondern auch die Funktionalität unseres Dialogsystems unterstützte.

Die Präsentation war auch eine Gelegenheit, über die Herausforderungen zu sprechen, die wir während der Woche überwunden hatten, wie die Schwierigkeiten bei der Speicherung und Nutzung von Usereingaben (Name/Studiengang) und die Einschränkungen durch fehlende Softwarebibliotheken.

Ergänzungen und Ausblick

Die Arbeit mit dem Furhat-Roboter während der Projektwoche hat zahlreiche Möglichkeiten aufgezeigt, wie soziale Roboter in Bildungseinrichtungen und anderen Umgebungen effektiv eingesetzt werden können. Die entwickelte Begrüßungskonversation könnte durch die Integration zusätzlicher Module, vor allem das Speichern und Verwenden von Nutzereingaben, weiter verbessert werden. Dies würde eine noch personalisiertere Interaktion ermöglichen, indem der Roboter nicht nur auf den Namen und Studiengang reagiert, sondern auch auf spezifische Interessen und vorherige Interaktionen mit dem Benutzer eingeht.

Des Weiteren könnten die Möglichkeiten der Gesten und Mimiken erheblich erweitert werden. Durch die Implementierung einer umfangreicheren Palette an menschlichen Ausdrücken und Reaktionen könnte der Roboter natürlicher und ansprechender wirken, was die Benutzererfahrung signifikant verbessert. Dies würde auch dazu beitragen, die Akzeptanz und das Engagement der Nutzer zu erhöhen, da der Roboter durch mehr Emotionalität und Ausdruckskraft in der Lage wäre, empathischer zu reagieren.

Abschließend lässt sich sagen, dass der Furhat großes Potenzial bietet, nicht nur als Lehrmittel, sondern auch als Forschungsobjekt in der HRI (Human-Robot-Interaction). Zukünftige Projekte könnten darauf abzielen, diese Aspekte zu vertiefen und zu erweitern, um die Möglichkeiten sozialer Robotik voll auszuschöpfen und die Interaktion zwischen Mensch und Maschine weiter zu verfeinern.