Collaboration par la parole et le toucher sur les écrans muraux
Une étude examine comment la parole et le toucher aident à résoudre des problèmes en collaborant sur de grands écrans.
Gabriela Molina León, Anastasia Bezerianos, Olivier Gladin, Petra Isenberg
― 6 min lire
Table des matières
- Travail Collaboratif sur Écrans Murs
- Notre Étude
- Résultats Clés
- Choix d'Interaction
- Traits de Personnalité
- Modèles de Mouvement
- Styles de Collaboration
- Interaction Tactile vs. Vocale
- Défis avec l'Interaction Vocale
- Amélioration de l'Expérience Utilisateur
- Conclusion
- Directions Futuristes
- Source originale
- Liens de référence
Cet article parle de comment deux personnes peuvent travailler ensemble en utilisant des commandes vocales et des gestes tactiles sur un grand écran mural tout en essayant de résoudre un problème. On était curieux de savoir comment ces deux manières d'interagir pouvaient aider les gens à collaborer. Des études antérieures ont montré que la parole pouvait aider les individus à explorer des données, mais c'est flou quand on parle de collaboration entre deux personnes. Pour en savoir plus, on a créé un système qui permet aux utilisateurs d'interagir avec les données à la fois par la voix et par le toucher.
Travail Collaboratif sur Écrans Murs
Les grands écrans offrent plusieurs avantages pour travailler avec des données. Ils permettent à deux personnes ou plus de voir la même info en même temps. Ça facilite les discussions sur ce qu'ils voient et le travail sur des solutions ensemble. À mesure que les données deviennent plus grandes et plus complexes, impliquer plus de gens peut aider à démêler le truc. Mais quand les gens collaborent, ils doivent faire attention à ne pas gêner leurs actions, ce qui peut être compliqué.
Interagir avec de grands écrans peut être différent de l'utilisation d'une souris et d'un clavier classiques. Le toucher est une manière courante d'interagir avec les écrans muraux mais ça peut être limité, car les gens doivent souvent se tenir près de l'écran. Quand ils sont plus loin, ils peuvent avoir besoin d'autres méthodes comme la voix. Notre étude se concentre justement sur comment la parole et le toucher peuvent travailler ensemble pendant des tâches collaboratives.
Notre Étude
Pour comprendre comment des paires de personnes utilisent la parole et le toucher, on a conçu un système interactif qui supporte les deux méthodes. On a étudié dix paires de Participants qui devaient résoudre un mystère fictif en interagissant avec une collection de Documents affichés sur le mur. On s'est concentré sur comment ils choisissaient d'utiliser différentes méthodes d'entrée, comment ils se déplaçaient devant l'écran, et comment ces facteurs influençaient leur collaboration.
Résultats Clés
Bien que le toucher ait été la méthode d'entrée la plus courante, les participants préféraient utiliser la parole pour certaines tâches, surtout celles qui affectaient toutes les données. Ils ont trouvé que parler les aidait à être conscients de ce que faisait leur partenaire. Fait intéressant, la personnalité des participants influençait leur utilisation de la parole ; ceux avec une meilleure convivialité avaient tendance à parler moins par souci pour leur partenaire.
Choix d'Interaction
La plupart des participants utilisaient souvent des gestes tactiles, surtout pour des tâches comme ouvrir et fermer des documents. Cependant, ils utilisaient également des commandes vocales pour trier et rechercher des mots clés. Certains utilisaient chaque méthode exclusivement, tandis que d'autres alternaient entre les deux selon la tâche.
Traits de Personnalité
Durant notre étude, on a évalué les personnalités des participants sur trois traits : extraversion, ouverture et convivialité. On a constaté que les participants conviviaux avaient moins tendance à utiliser des commandes vocales, car ils ne voulaient pas interrompre leurs partenaires. À l'inverse, les participants extravertis avaient tendance à utiliser plus souvent la parole.
Modèles de Mouvement
On a suivi comment les participants se déplaçaient devant le mur pendant qu'ils travaillaient. En utilisant le toucher, ils se tenaient généralement plus près de l'écran, tandis qu'ils avaient tendance à se déplacer plus loin pour utiliser la voix. Cette distance leur permettait d'avoir une meilleure vue des documents et des données en parlant.
Styles de Collaboration
Notre analyse a montré que la plupart des collaborations impliquaient une coopération étroite, les participants discutant de leurs trouvailles et pensées. Malgré les préoccupations concernant le fait que la parole puisse être disruptive, les participants l'utilisaient efficacement pour du travail étroitement ou lâchement couplé. La plupart des paires pensaient qu'elles travaillaient bien ensemble, et les commandes vocales contribuaient à une meilleure prise de conscience des actions de chacun.
Interaction Tactile vs. Vocale
En général, les participants trouvaient le toucher plus efficace que la parole pour beaucoup de tâches, car il permettait une manipulation directe et un retour immédiat. Cependant, ils reconnaissaient que la parole pouvait être bénéfique pour des actions spécifiques, comme trier des groupes de documents ou opérer de loin.
Défis avec l'Interaction Vocale
Bien que l'interaction vocale ait beaucoup d'avantages, les participants rencontraient fréquemment des problèmes de précision de reconnaissance. Certains ont dit qu'ils se sentaient hésitants à utiliser la voix à cause des préoccupations sur leur compréhension. Les non-natifs exprimaient des défis supplémentaires en raison de leur accent et prononciation.
Amélioration de l'Expérience Utilisateur
Les participants ont suggéré que pour une utilisation optimale, la reconnaissance vocale devrait être précise et flexible. Ils ont apprécié que le système leur permette d'activer la reconnaissance vocale manuellement pour ne pas interférer avec leur conversation en travaillant ensemble. Beaucoup ont aussi mentionné le besoin de fonctionnalités supplémentaires pour rendre les interactions plus fluides, comme un meilleur retour sur les actions menées.
Conclusion
Notre étude apporte des insights intéressants sur comment l'interaction vocale peut soutenir efficacement les tâches collaboratives sur de grands écrans. Bien que le toucher reste un choix populaire pour des tâches individuelles, les commandes vocales offrent des avantages uniques, particulièrement pour des actions qui impactent l'ensemble du jeu de données. De plus, les traits de personnalité influencent significativement comment les gens préfèrent s'engager dans l'interaction vocale.
En analysant l'interaction entre la parole et le toucher, on vise à améliorer la conception de systèmes qui facilitent la collaboration et à mieux comprendre les besoins des utilisateurs. Nos résultats encouragent une exploration plus poussée de la manière dont la parole peut être intégrée dans divers environnements Collaboratifs pour une meilleure communication et interaction.
Directions Futuristes
On recommande de faire plus de recherches pour explorer différents contextes collaboratifs et évaluer comment les commandes vocales peuvent être intégrées de manière efficace avec d'autres méthodes d'entrée. Analyser comment des groupes plus grands utilisent la voix dans des environnements multi-utilisateurs pourrait fournir des insights supplémentaires, notamment sur les distractions potentielles ou les impacts sur le travail d'équipe.
De plus, comprendre les influences culturelles sur la distance, le territoire et l'espace personnel dans des scénarios collaboratifs enrichirait notre compréhension de l'interaction collaborative. En élargissant nos connaissances dans ces domaines, on peut construire des systèmes qui répondent mieux aux besoins des utilisateurs dans des environnements collaboratifs.
En résumé, cette exploration de l'interaction parole et toucher dans un cadre collaboratif met en lumière le potentiel d'innovations dans les systèmes d'analyse visuelle et fournit une base pour de futurs travaux dans le domaine.
Titre: Talk to the Wall: The Role of Speech Interaction in Collaborative Visual Analytics
Résumé: We present the results of an exploratory study on how pairs interact with speech commands and touch gestures on a wall-sized display during a collaborative sensemaking task. Previous work has shown that speech commands, alone or in combination with other input modalities, can support visual data exploration by individuals. However, it is still unknown whether and how speech commands can be used in collaboration, and for what tasks. To answer these questions, we developed a functioning prototype that we used as a technology probe. We conducted an in-depth exploratory study with 10 participant pairs to analyze their interaction choices, the interplay between the input modalities, and their collaboration. While touch was the most used modality, we found that participants preferred speech commands for global operations, used them for distant interaction, and that speech interaction contributed to the awareness of the partner's actions. Furthermore, the likelihood of using speech commands during collaboration was related to the personality trait of agreeableness. Regarding collaboration styles, participants interacted with speech equally often whether they were in loosely or closely coupled collaboration. While the partners stood closer to each other during close collaboration, they did not distance themselves to use speech commands. From our findings, we derive and contribute a set of design considerations for collaborative and multimodal interactive data analysis systems. All supplemental materials are available at https://osf.io/8gpv2
Auteurs: Gabriela Molina León, Anastasia Bezerianos, Olivier Gladin, Petra Isenberg
Dernière mise à jour: 2024-08-09 00:00:00
Langue: English
Source URL: https://arxiv.org/abs/2408.03813
Source PDF: https://arxiv.org/pdf/2408.03813
Licence: https://creativecommons.org/licenses/by/4.0/
Changements: Ce résumé a été créé avec l'aide de l'IA et peut contenir des inexactitudes. Pour obtenir des informations précises, veuillez vous référer aux documents sources originaux dont les liens figurent ici.
Merci à arxiv pour l'utilisation de son interopérabilité en libre accès.