PhD Defense / Soutenance de thèse Elodie BOUZBIB

Dear all,

I am glad to invite you to my PhD defense, entitled “Robotised Tangible User Interface for Multimodal Interactions in VR: Anticipating Intentions to Physically Encounter the User”. The presentation will take place on Wednesday, October 20th 2021, at 2pm in UPMC campus (4 place Jussieu), in Room 304 (Tour 65-66).

The presentation will be in English. There will also be a celebration after the defense in H20.

Jury Members

• Mrs. Maud Marchal, Professeur, IRISA, Inria Bretagne Atlantique (Rapporteur)

• Mrs. Indira Thouvenin, Professeur, UTC (Rapporteur)

• Mrs. Vanda Luengo, Professeure, LIP6, Sorbonne Université (Examinatrice)

• Mr. Jan Gugenheimer, Maître de Conférences, LTCI, Institut Polytechnique de Paris (Examinateur)

• Mr. Gilles Bailly, Chargé de Recherche, CNRS, ISIR, Sorbonne Université (Directeur de Thèse)

• Mr. Pascal Frey, Professeur, ISCD, Sorbonne Université (Directeur de Thèse)

• Mr. Sinan Haliyo, Maître de Conférences, ISIR, Sorbonne Université (Encadrant de Thèse)

Abstract

Virtual Reality (VR) experiences are by essence multimodal: they heavily rely on the users’ senses. Yet, integrating Haptics - the sense of touch - in VR is a timely and challenging topic.

The goal of this thesis is to provide consistent Haptic Feedback while enabling intuitive Interaction Techniques in Virtual environments. More specifically, I aim to let the users perform unencumbered interactions in VR - where they are free of any contraption - and promote the design of a Haptic Solution in these regards.

To achieve this, I discriminate the Integration of Haptics in VR through a threefold approach:

1. I investigate how to provide believable fine tactile and large kinesthetic feedback;

2. I depict interaction techniques in VR, the tasks users perform and draw novel methods to enable them.

These enable me to draw an Analytical Framework with methodological contributions. This framework proposes novel dimensions to evaluate VR interactions via their associated Haptic Solutions, and emphasizes the promising future of Encountered-Type of Haptic Displays. It then depicts their specifications, challenges and opportunities from both conception and perception perspectives.

3. I then provide artefact contributions, and propose the conception and design of a Robotised Tangible User Interface, CoVR.

CoVR anticipates the users’ intentions both within- and between-objects, to physically encounter the users at their desired object of interest prior to interaction. This thesis finally provides empirical contributions, with technical and perceptual studies around CoVR.

I’m looking forward to seeing you there!

Cheers,

Elodie

---------------------------------------------------------------------------------------------------------------------------

Bonjour à tous,

J'ai le plaisir de vous inviter à la soutenance de ma thèse intitulée « Interface Utilisateur Tangible Robotisée pour des Interactions Multimodales en RV : Anticiper les Intentions pour Rencontrer l'Utilisateur Physiquement ». Celle-ci aura lieu le Mercredi 20 Octobre 2021, à 14h sur le campus UPMC (4 place Jussieu), en salle 304 tour 65-66.

La présentation sera en anglais. Elle sera suivie d'un pot en H20.

Composition du jury

• Mme. Maud Marchal, Professeur, IRISA, Inria Bretagne Atlantique (Rapporteur)

• Mme. Indira Thouvenin, Professeur, UTC (Rapporteur)

• Mme. Vanda Luengo, Professeure, LIP6, Sorbonne Université (Examinatrice)

• M. Jan Gugenheimer, Maître de Conférences, LTCI, Institut Polytechnique de Paris (Examinateur)

• M. Gilles Bailly, Chargé de Recherche, CNRS, ISIR, Sorbonne Université (Directeur de Thèse)

• M. Pascal Frey, Professeur, ISCD, Sorbonne Université (Directeur de Thèse)

• M. Sinan Haliyo, Maître de Conférences, ISIR, Sorbonne Université (Encadrant de Thèse)

Sujet

Les expériences en Réalité Virtuelle (RV) sont par essence multimodales : elles s’appuient sur les sens des utilisateurs. Néanmoins, l’intégration de l’Haptique - le sens du toucher - en RV reste complexe.

L’objectif de cette thèse est de prodiguer du Retour Haptique cohérent, en permettant des Techniques d’Interaction intuitives dans les environnements virtuels. Je vise à laisser les utilisateurs effectuer des interactions dites "sans encombre" en RV - où les utilisateurs ne portent aucun appareillage - et promeus à cet égard la conception d’une Solution Haptique. Pour ce faire, je distingue l’intégration de l’Haptique en RV selon une approche triple :

1. J’étudie comment prodiguer des retours tactile et kinesthésique vraisemblables ;

2. Je décris les techniques d’interaction en RV, les tâches exécutées par les utilisateurs, et conçois de nouvelles méthodes les permettant.

Je dérive ces deux premiers points pour apporter un Cadre d’Analyse avec des contributions méthodologiques. Je propose de nouvelles dimensions évaluant les interactions en RV via des solutions haptiques, et souligne le futur prometteur des Interfaces Haptiques à Contacts Intermittents. Je décris leurs spécifications, défis et opportunités - conceptuels et perceptuels.

3. Je contribue ensuite à la conception et l’implémentation d’un artefact : une Interface Tangible Robotisée, CoVR.

CoVR anticipe les intentions des utilisateurs intra- et inter-objets, et les encontre physiquement à l’objet d’intérêt de leur choix avant que l’interaction ne survienne. J’apporte enfin des contributions empiriques, via des évaluations techniques et d’usabilité de CoVR.

J’espère vous y voir nombreux !

Bonne journée à tous,

Elodie