Dissertação

Detection of interaction intention and engagement in HRI using joint gaze and gesture analysis EVALUATED

Nesta tese de mestrado é proposto um método para possibilitar que os robôs tenham a capacidade perceber quando as pessoas estão dispostas a começar a interagir. Nós denotamos esta capacidade de intenção de interação. É possível detetar a intenção de interação usando comunicação não-verbal, comunicação verbal ou mesmo ambas. No contexto deste trabalho, foi estudada a comunicação não-verbal para a deteção de interação. O detetor de intenção de interação pode ser usado para ajudar um robô a escolher um interlocutor num grupo de pessoas. A nossa abordagem é baseada num sistema multimodal que leva em consideração a direção do olhar e os gestos feitos pela pessoa. A direção do olhar e os gestos combinados podem ser usados para perceber se uma pessoa quer interagir ou não com o robô. Contudo é necessário sincroniza-los e fundi-los para que o detetor seja robusto, rápido e preciso. Nós treinamos e avaliamos o nosso detetor através de experiencias realizadas com um total de 71 participantes. O detetor de intenção de interação foi capaz de perceber se uma pessoa queria interagir com o robô ou não com uma precisão de 91.1\%.
intenção de interação, deteção de gestos, deteção de gaze, sistema multimodal, interação humano-robô, robô guia

Novembro 22, 2017, 14:0

Publicação

Obra sujeita a Direitos de Autor

Orientação

ORIENTADOR

José Alberto Rosado dos Santos Vitor

Departamento de Engenharia Electrotécnica e de Computadores (DEEC)

Professor Catedrático

ORIENTADOR

Alexandre José Malheiro Bernardino

Departamento de Engenharia Electrotécnica e de Computadores (DEEC)

Professor Associado