Interaction with Physical Referents In and Around the Field of View of Optical See-Through Augmented-Reality Headsets

Interaction avec des Référents Physiques Dans et Autour du Champ D’Affichage des Casques Semi-Transparents de Réalité Augmentée

Clément Truillet (1, 2, 3) , Marcos Serrano (1, 2, 3) , Emmanuel Dubois (1, 2, 3)

1 UT3 - Université Toulouse III - Paul Sabatier
2 IRIT - Institut de recherche en informatique de Toulouse
3 IRIT-ELIPSE - Etude de L’Interaction Personne SystèmE

Combining digital and physical worlds is today largely simplified thanks to many advances in the capabilities of optical see through AR head mounted displays. In many scenarios such as augmented maintenance, the implementation of AR is now based on the use of physical referents associated with digital information. Although the display space with optical see-through Head-Mounted Displays (HMDs) is almost unlimited, its field of view (FoV) is still small: overlapping the FoV with all these physical referents is therefore very constraining. This raises the challenge of pointing physical referents around the HMD FoV, where the feedback cannot be displayed. To this end, our work characterizes the pointing of physical referents inside and outside the HMD FoV to establish the differences. Our studies focus specifically the nature of the target and the form of feedback used during pointing.

La combinaison des mondes numérique et physiques est aujourd’hui largement simplifiée grâce aux nombreux progrès réalisés dans le domaine des casques de réalité augmentée (RA). Dans de nombreux scenarios, tels que la maintenance augmentée, la mise en œuvre de la RA s’appuie désormais sur l’utilisation de référents physiques associés à des données numériques. Bien que l’espace d’interaction d’un casque de RA soit presque illimité, son champ d’affichage reste limité. Par conséquent la question du pointage des référents physiques autour du champ d’affichage du casque, où le feedback ne peut être affiché, devient cruciale. A cette fin, nos travaux caractérisent le pointage d’un référent physique dans, puis autour, du champ d’affichage du casque pour établir les différences. Nos études se focalisent sur la nature de la cible et du feedback mis en œuvre au cours du pointage.

Mots clés: Physical target; raycasting; finger pointing

Mots clés: Cible physique; raycasting; pointage du doigt

Domaines: Interface homme-machine [cs.HC]

Clément Truillet, Marcos Serrano, Emmanuel Dubois. Interaction avec des Référents Physiques Dans et Autour du Champ D’Affichage des Casques Semi-Transparents de Réalité Augmentée. 2024. ⟨hal-04450136⟩