Playing "The Mind" game with a robot

Sandra Marisa Carvalho de Andrade

Key information

Authors:

Sandra Marisa Carvalho de Andrade (Sandra Marisa Carvalho de Andrade)

Supervisors:

Filipa Isabel Nogueira Correia (Filipa Isabel Nogueira Correia); Ana Maria Severino de Almeida e Paiva (Ana Paiva)

Published in

November 14, 2023

Abstract

A questão que será abordada neste projeto é: qual a influência do olhar do robô na sincronização de uma equipa híbrida, isto é uma equipa composta por humanos e robôs? Para responder a esta pergunta, primeiro foi feito um estudo observacional. Da qual resultaram dois tipos de comportamentos não verbais, os Task-oriented behaviours e os Team-oriented behaviours. Com estes foram criadas as quatro condições para o estudo principal. A condição Random gaze onde o robô nunca olhava para os participantes. A condição Task-oriented gaze onde o robô só tinha Task-oriented behaviours. A condição Task-oriented e Reactive gaze onde além dos Task-oriented behaviours o robô reagia aos comportamentos dos humanos de forma a criar mutual gaze e joint attention. E a condição Task-oriented de Proactive gaze onde o robô além dos comportamentos task-oriented também olhava regularmente para os humanos de forma a iniciar mutual gaze com os participantes. Utilizando estas condições foi feito o estudo para responder à pergunta de investigação. Não foi encontrado suporte que o gaze tenha influenciado a sincronização. No entanto, foram encontrados efeitos do Reactive Gaze na capacidade de estabelecer mutual gaze e em algumas métricas subjetivas da perceção da equipa. The question that will be addressed in this project is: what is the influence of the robot's gaze on the synchronization of a hybrid, i.e. a team made up of humans and robots? To answer this question, an observational study was first carried out. This resulted in two types of non-verbal behaviours, Task-oriented behaviours and Team-oriented behaviours. With these, the four conditions for the main study were created. The Random gaze condition where the robot never looked at the participants. The Task-oriented gaze condition where the robot only had Task-oriented behaviours. In the Task-oriented and Reactive gaze condition, the robot reacted to the human behaviours to create mutual gaze and joint attention in addition to the Task-oriented behaviours. In the Task-oriented and Proactive gaze condition the robot, in addition to the task-oriented behaviours, also regularly looked at humans to initiate mutual gaze with the participants. Using these conditions, the study was carried out to answer the research question. No support was found that the gaze influenced the synchronisation. However, it was found some effects of the Reactive Gaze on the ability to establish mutual gaze and on some subjective measures of team perception.