Robin
ROBot-human INteraction
Beschreibung
Die Interaktion zwischen Mensch und Roboter ist meist auf Eingabegeräte wie Tastatur und Maus beschränkt. Für zukünftige Anwendungen tritt die natürliche Interaktion immer mehr in den Vordergrund. Zum Beispiel sollen Serviceroboter im Haushalt helfen. Die Bedienung solcher Roboter muss dann auch ohne technische Kenntnisse möglich sein. Besonders ältere Menschen sind dabei auf bekannte Interaktionsmöglichkeiten angewiesen.
Die Kommunikation zwischen Menschen untereinander ist dabei nicht auf die Sprache beschränkt. Vielmehr ist es ein komplexes Zusammenspiel von Sprache, Gestik, Mimik und emotionalen Ausdrücken. Deshalb ist es notwendig, die Bewegungen eines Kommunikationspartners zu beobachten. Diese Bewegungen können der Ausdruck von Emotionen mit Hilfe der Haut oder ein Handzeichen des Roboters sein. Robin ist ein fortschrittlicher Oberkörperroboter mit einem hinterleuchteten Projektionsgesicht, der von Engineered Arts als Robothespian hergestellt wird.
Ein wichtiger Schritt hin zur natürlichen Kommunikation stellt daher die dynamische Modellierung des Menschen dar. Diese Modellierung ermöglicht es Bewegungen des Gesprächspartners zu interpretieren und angemessen darauf zu reagieren.
Im Laufe der Jahre hat sich die affektive Interaktion auf der Grundlage der Echtzeiterkennung menschlicher nonverbaler Signale etabliert. Die Einbeziehung von verbalen Hinweisen war sehr wichtig, um besser zu verstehen, was ein Interaktionspartner vermittelt. Neuere Arbeiten von RRLAB konzentrieren sich auf die Erkennung von verbalen Hinweisen während der Interaktion. Textbasierte Interaktionsszenarien wurden erfolgreich mit einem integrierten Echtzeit-Spracherkennungssystem experimentiert, um verbale Interaktion zu ermöglichen. Es wurden verschiedene Informationsextraktionsstrategien verwendet, um eine Vorstellung von Kontextbewusstsein während der Interaktion sicherzustellen. Die neuere Forschung konzentriert sich auf einen wissenschaftlichen Rahmen, der die Verbesserung der sprachlichen und kognitiven Fähigkeiten des humanoiden Roboters auslöst.
Kontakt
Bilder
Videos
Veröffentlichungen
- “You Scare Me”. The Effects of Humanoid Robot Appearance, Emotion, and Interaction Skills on Uncanny Valley Phenomenon.
Actuators, S. 19. (2024)
https://www.mdpi.com/2076-0825/13/10/419 - Multimodal Episodic Analysis of Human Personality Traits for Personalized Behavior in Social Robots.
Proceedings of the 22nd IEEE-RAS International Conference on Humanoid Robots (Humanoids), (2023)
DOI: 10.1109/Humanoids57100.2023.10375182 - Personalized Human-Robot Interaction Based on Multimodal Perceptual Cues.
(2023)
https://www.dr.hut-verlag.de/978-3-8439-5353-5.html - Social Perception and Scene Awareness in Human-Robot Interaction.
Proceedings of the 15th International Conference on Social Robotics (ICSR2023), S. 123 - 132. (2023)
https://link.springer.com/chapter/10.1007/978-981-99-8718-4_11 - Social Robot Dressing Style. An evaluation of interlocutor preference for University Setting.
2023 32nd IEEE International Conferenceon Robot and Human Interactive Communication (RO-MAN), S. 6. (2023)
DOI: 10.1109/RO-MAN57019.2023.10309491 - Harnessing Long-term Memory for Personalized Human-Robot Interactions.
Proceedings of the 21st IEEE-RAS International Conference on Humanoid Robots (Humanoids), S. 377 - 382. (2022)
DOI: 10.1109/Humanoids53995.2022.10000213 - Multimodal Perceptual Cues for Context-aware Human-Robot Interaction.
The Joint International Conference of the 13th IFToMM International Symposium on Science of Mechanisms and Machines (SYROM 2022) and the XXV International Conference on Robotics (ROBOTICS 2022), Vol. 127, S. 283 - 294. (2022)
DOI: 10.1007/978-3-031-25655-4_29 - Paralinguistic Cues in Speech to Adapt Robot Behavior in Human-Robot Interaction.
Proceedings of the 9th IEEE RAS/EMBS International Conference on Biomedical Robotics & Biomechatronics (BioRob), (2022)
https://ieeexplore.ieee.org/document/9925505 - Real-time Emotion Appraisal with Circumplex Model for Human-Robot Interaction.
arXiv preprint arXiv:2202.09813, (2022)
https://arxiv.org/abs/2202.09813 - Towards Emotion-aware Personalized Human-Robot Interaction.
5th Young Researchers Symposium 2022, S. 43. (2022)
https://publica.fraunhofer.de/entities/publication/49cc89ec-9c91-45b9-9b5b-56032e398f76 - Adapting Behaviour of Socially Interactive Robot based on Text Sentiment.
30th International Conference on Robotics in Alpe-Adria-Danube Region (RAAD), Vol. Advances in Service and Industrial Robotics, S. 221 - 228. (2021)
DOI: 10.1007/978-3-030-75259-0_24 - Exploiting Conversational Topic Awareness for Interactive Robots.
Proceedings of the 20th IEEE International Conference on Advanced Robotics (ICAR), S. 474 - 479. (2021)
DOI: 10.1109/ICAR53236.2021.9659484 - Personality Traits Assessment using PAD Emotional Space in Human-robot Interaction.
Proceedings of the 16th International Joint Conference on Computer Vision, Imaging and Computer Graphics Theory and Applications (VISIGRAPP 2021) - Volume 2, S. pp. - 111-118. (2021)
https://www.scitepress.org/PublishedPapers/2021/101618/101618.pdf - Towards Linguistic and Cognitive Competence for Socially Interactive Robots.
Proceedings of the 9th IEEE International Conference on Robot Intelligence Technology and Applications (RITA), Nr. 429, S. 520 - 530. (2021)
https://link.springer.com/chapter/10.1007/978-3-030-97672-9_47 - Utilizing Semantic and Contextual Information during Human-Robot Interaction.
Proceedings of the 11th IEEE International Conference on Development and Learning (ICDL), S. 1 - 6. (2021)
DOI: 10.1109/ICDL49984.2021.9515611 - Multimodal Fusion of Human Behavioural Traits. A Step Towards Emotionally Intelligent Human-Robot Interaction.
(2020)
http://nbn-resolving.org/urn:nbn:de:hbz:386-kluedo-59800 - Pseudo-Randomization in Automating Robot Behaviour during Human-Robot Interaction.
Proceedings of the 10th IEEE International Conference on Development and Learning and Epigenetic Robotics (ICDL-ER), S. 120 - 125. (2020)
DOI: 10.1109/ICDL-EpiRob48136.2020.9278115 - Automatic Assessment of Human Personality Traits. A Step towards Intelligent Human-Robot Interaction.
2018 IEEE-RAS 18th International Conference on Humanoid Robotics (Humanoids), S. 670 - 675. (2018)
https://ieeexplore.ieee.org/document/8624975 - Emotion Based Human-Robot Interaction.
Proceedings of the 13th International Scientific-Technical Conference on Electromechanics and Robotics ”Zavalishin’s Readings” (ER(ZR)), (2018)
https://www.matec-conferences.org/articles/matecconf/abs/2018/20/matecconf_erzr2018_01001/matecconf_erzr2018₀1001.html - Real-Time Recognition of Human Postures for Human-Robot Interaction.
Proceedings of the 11th International Conference on Advances in Computer-Human Interactions (ACHI), S. 114 - 119. (2018)
https://www.researchgate.net/publication/333651481_Real-Time_Recognition_of_Human_Postures_for_Human-Robot_Interaction - Real-time Recognition of Extroversion-Introversion Trait in Context of Human-Robot Interaction.
Advances in Service and Industrial Robotics, Vol. 67, S. 63 - 70. (2018)
https://link.springer.com/chapter/10.1007/978-3-030-00232-9_7 - Ability of Humanoid Robot to Perform Emotional Body Gestures.
Advances in Service and Industrial Robotics, Vol. 49, S. 657 - 664. (2017)
https://link.springer.com/chapter/10.1007/978-3-319-61276-8_69 - Human Robot Interaction using Dynamic Hand Gestures.
Advances in Service and Industrial Robotics, Vol. 49, S. 647 - 656. (2017)
https://link.springer.com/chapter/10.1007/978-3-319-61276-8_68 - Interactive Communication Between Human and Robot Using Nonverbal Cues.
Advances in Service and Industrial Robotics, Vol. 49, S. 673 - 680. (2017)
https://link.springer.com/chapter/10.1007/978-3-319-61276-8_71 - Action Unit Based Facial Expression Recognition Using Deep Learning.
Proceedings of the 25th International Conference on Robotics in Alpe-Adria-Danube Region, RAAD 2016, Vol. 540, S. 413 - 420. (2016)
https://link.springer.com/chapter/10.1007/978-3-319-49058-8_45 - Embodiment of Human Personality with EI-Robots by Mapping Behaviour Traits from Live-Model.
Advances in Intelligent Systems and Computing, Vol. 540, S. 437 - 448. (2016)
https://link.springer.com/chapter/10.1007/978-3-319-49058-8_48 - Perception of Nonverbal Cues for Human-Robot Interaction.
(2016)
http://www.dr.hut-verlag.de/9783843928526.html - Real-time Perception of Nonverbal Human Feedback in a Gaming Scenario.
Proceedings of the 2016 British HCI Conference, (2016) - Recognizing Hand Gestures Using Local Features. A Comparison Study.
Advances in Intelligent Systems and Computing, Vol. 540, S. 394 - 401. (2016)
https://link.springer.com/chapter/10.1007/978-3-319-49058-8_43 - Recognizing Hand Gestures for Human-Robot Interaction.
Proceedings of the 9th International Conference on Advances in Computer-Human Interactions (ACHI), S. 333 - 338. (2016)
https://personales.upv.es/thinkmind/ACHI/ACHI_2016/achi_2016_16_30_20321.html - A Multimodal Nonverbal Human-Robot Communication System.
Proceedings of the 6th International Conference on Computational Bioengineering (ICCB), (2015)
https://www.researchgate.net/publication/311739283_A_Multimodal_Nonverbal_Human-Robot_Communication_System