Simple Science

Scienza all'avanguardia spiegata semplicemente

# Informatica# Interazione uomo-macchina

Collaborazione tramite Parola e Tatto su Schermi a Parete

Uno studio esamina come il parlare e il tocco aiutano a risolvere problemi insieme su schermi grandi.

Gabriela Molina León, Anastasia Bezerianos, Olivier Gladin, Petra Isenberg

― 6 leggere min


Parlare e toccare nellaParlare e toccare nellacollaborazioneusando schermi.efficaci per il lavoro di squadraEsplorare metodi di interazione
Indice

Questo articolo parla di come due persone possono lavorare insieme usando comandi vocali e gesti tattili su un grande schermo mentre cercano di risolvere un problema. Eravamo curiosi di capire come questi due modi di interagire potessero aiutare le persone quando lavorano insieme. Studi precedenti hanno dimostrato che usare la voce può aiutare gli individui a esplorare i dati, ma non è chiaro come funzioni quando due persone collaborano. Per saperne di più, abbiamo creato un sistema che permette agli utenti di interagire con i dati sia tramite voce che tocco.

Lavoro Collaborativo sui Monitor

I grandi schermi offrono vari vantaggi per lavorare con i dati. Forniscono uno spazio ampio, permettendo a due o più persone di vedere le stesse informazioni contemporaneamente. Questo rende più facile per loro parlare di ciò che vedono e lavorare insieme su soluzioni. Man mano che i dati diventano più grandi e complessi, avere più persone coinvolte può aiutare a risolvere le cose. Tuttavia, quando le persone collaborano, devono assicurarsi che le loro azioni non ostacolino l'una l'altra, il che può essere complicato.

Interagire con schermi grandi può essere diverso dall'usare mouse e tastiere standard. Il tocco è un modo comune di interagire con i monitor, ma può essere limitato dato che spesso le persone devono stare vicine allo schermo. Quando sono più lontane, potrebbero dover usare altri metodi come la voce. Il nostro studio si concentra specificamente su come voce e tocco possono lavorare insieme durante compiti collaborativi.

Il Nostro Studio

Per capire come le coppie di persone usano voce e tocco, abbiamo progettato un sistema interattivo che supporta entrambi i metodi. Abbiamo studiato dieci coppie di Partecipanti che dovevano risolvere un mistero fittizio interagendo con una raccolta di documenti mostrati sul muro. Ci siamo concentrati su come sceglievano di usare diversi metodi d'input, come si muovevano davanti al display e come questi fattori influenzavano la loro collaborazione.

Risultati Chiave

Sebbene il tocco fosse il metodo d'input più comune, i partecipanti preferivano usare la voce per alcuni compiti, specialmente per quelli che influenzavano tutti i dati. Hanno scoperto che usare la voce li aiutava a essere consapevoli di ciò che faceva il loro partner. Interessante, la personalità dei partecipanti influenzava il loro uso della voce; quelli con maggiore gradevolezza tendevano a parlare meno per non disturbare il partner.

Scelte di Interazione

La maggior parte dei partecipanti usava gesti tattili frequentemente, soprattutto per compiti come aprire e chiudere documenti. Tuttavia, usavano anche comandi vocali per ordinare e cercare parole chiave. Alcuni partecipanti usavano ciascun metodo in modo esclusivo, mentre altri passavano da uno all'altro a seconda del compito.

Tratti di Personalità

Durante il nostro studio, abbiamo valutato le personalità dei partecipanti in base a tre tratti: estroversione, apertura e gradevolezza. Abbiamo scoperto che i partecipanti gradevoli erano meno propensi a usare comandi vocali, poiché non volevano interrompere i loro partner. Al contrario, i partecipanti estroversi tendevano a usare la voce più spesso.

Schemi di Movimento

Abbiamo tracciato come si muovevano i partecipanti davanti al muro mentre lavoravano. Quando usavano il tocco, solitamente stavano più vicini al display, mentre tendevano a spostarsi più lontano per usare la voce. Questa distanza permetteva loro di avere una visione migliore dei documenti e dei dati mentre parlavano.

Stili di Collaborazione

La nostra analisi ha mostrato che la maggior parte delle collaborazioni comportava una cooperazione ravvicinata, con i partecipanti che discutevano le loro scoperte e pensieri. Nonostante le preoccupazioni che parlare potesse essere di disturbo, i partecipanti lo usavano efficacemente sia per lavori strettamente connessi che per lavori meno interconnessi. La maggior parte delle coppie credeva di lavorare bene insieme e i comandi vocali contribuivano a una maggiore consapevolezza delle azioni reciproche.

Tocco vs. Interazione Vocale

In generale, i partecipanti trovavano il tocco più efficace della voce per molti compiti, poiché consentiva una manipolazione diretta e un feedback immediato. Tuttavia, riconoscevano che la voce poteva essere utile per azioni specifiche, come ordinare gruppi di documenti o operare da distanza.

Sfide con l'Interazione Vocale

Sebbene l'interazione vocale comporti molti vantaggi, i partecipanti affrontavano spesso problemi con la precisione del riconoscimento. Alcuni riportavano di sentirsi esitanti a usare la voce a causa della preoccupazione di non essere compresi. I non madrelingua esprimevano ulteriori sfide a causa dei loro accenti e pronunce.

Migliorare l'Esperienza Utente

I partecipanti suggerivano che per un uso ottimale, il riconoscimento vocale dovesse essere accurato e flessibile. Apprezzavano che il sistema permettesse loro di attivare manualmente il riconoscimento vocale in modo che non interferisse con la loro conversazione mentre lavoravano insieme. Molti partecipanti menzionavano anche la necessità di ulteriori funzionalità per rendere le interazioni più fluide, come un feedback migliore su quali azioni venivano eseguite.

Conclusione

Il nostro studio fornisce spunti utili su come l'interazione vocale possa supportare efficacemente i compiti collaborativi su grandi display. Sebbene il tocco rimanga una scelta popolare per i compiti individuali, i comandi vocali offrono vantaggi unici, in particolare per azioni che influenzano l'intero insieme di dati. Inoltre, i tratti di personalità influenzano significativamente come le persone preferiscono impegnarsi nell'interazione vocale.

Analizzando l'interazione tra voce e tocco, miriamo a migliorare il design di sistemi che facilitano la collaborazione e migliorano la comprensione delle esigenze degli utenti. I nostri risultati incoraggiano ulteriori esplorazioni su come la voce possa essere integrata in vari ambienti collaborativi per una migliore comunicazione e interazione.

Direzioni Future

Raccomandiamo ulteriori ricerche per esplorare diversi contesti collaborativi e valutare come i comandi vocali possano essere integrati in modo efficiente con altri metodi d'input. Analizzare come gruppi più grandi usano la voce in ambienti multi-utente potrebbe fornire ulteriori spunti, soprattutto riguardo a potenziali distrazioni o impatti sul lavoro di squadra.

Inoltre, comprendere le influenze culturali su distanza, territorio e spazio personale in scenari collaborativi arricchirebbe la nostra comprensione dell'interazione collaborativa. Espandendo le nostre conoscenze in queste aree, possiamo costruire sistemi che servano meglio le esigenze degli utenti in ambienti collaborativi.

In sintesi, questa esplorazione dell'interazione vocale e del tocco in un contesto collaborativo evidenzia il potenziale per innovazioni nei sistemi di analisi visiva e fornisce una base per futuri lavori nel campo.

Fonte originale

Titolo: Talk to the Wall: The Role of Speech Interaction in Collaborative Visual Analytics

Estratto: We present the results of an exploratory study on how pairs interact with speech commands and touch gestures on a wall-sized display during a collaborative sensemaking task. Previous work has shown that speech commands, alone or in combination with other input modalities, can support visual data exploration by individuals. However, it is still unknown whether and how speech commands can be used in collaboration, and for what tasks. To answer these questions, we developed a functioning prototype that we used as a technology probe. We conducted an in-depth exploratory study with 10 participant pairs to analyze their interaction choices, the interplay between the input modalities, and their collaboration. While touch was the most used modality, we found that participants preferred speech commands for global operations, used them for distant interaction, and that speech interaction contributed to the awareness of the partner's actions. Furthermore, the likelihood of using speech commands during collaboration was related to the personality trait of agreeableness. Regarding collaboration styles, participants interacted with speech equally often whether they were in loosely or closely coupled collaboration. While the partners stood closer to each other during close collaboration, they did not distance themselves to use speech commands. From our findings, we derive and contribute a set of design considerations for collaborative and multimodal interactive data analysis systems. All supplemental materials are available at https://osf.io/8gpv2

Autori: Gabriela Molina León, Anastasia Bezerianos, Olivier Gladin, Petra Isenberg

Ultimo aggiornamento: 2024-08-09 00:00:00

Lingua: English

URL di origine: https://arxiv.org/abs/2408.03813

Fonte PDF: https://arxiv.org/pdf/2408.03813

Licenza: https://creativecommons.org/licenses/by/4.0/

Modifiche: Questa sintesi è stata creata con l'assistenza di AI e potrebbe presentare delle imprecisioni. Per informazioni accurate, consultare i documenti originali collegati qui.

Si ringrazia arxiv per l'utilizzo della sua interoperabilità ad accesso aperto.

Altro dagli autori

Articoli simili