PilotAR: Trasformare gli studi pilota in AR e MR
PilotAR migliora gli studi pilota rendendo più facile l'osservazione e la raccolta di dati in AR e MR.
― 6 leggere min
Indice
- Cos'è PilotAR?
- Perché gli studi pilota sono importanti?
- Sfide negli studi pilota AR/MR
- Caratteristiche di PilotAR
- Osservazioni Multi-View
- Monitoraggio e Annotazioni in Tempo Reale
- Supporto per Più Ricercatori
- Sommari dei Dati in Tempo Reale
- Come utilizzare PilotAR
- Fase di Configurazione
- Fase Pilota
- Fase di Analisi
- Esempio Pratico
- Conclusione
- Fonte originale
- Link di riferimento
Gli studi pilota sono esperimenti rapidi e informali che aiutano i ricercatori a testare idee e identificare problemi. Sono particolarmente utili in ambiti che utilizzano la Realtà Aumentata (AR) e la Realtà Mista (MR) perché permettono di vedere come le persone interagiscono con contenuti digitali. Tuttavia, gli studi pilota che utilizzano occhiali speciali possono essere difficili da gestire in modo efficiente. Questo perché i ricercatori spesso non possono vedere o registrare facilmente cosa stanno facendo gli utenti in tempo reale, rendendo difficile analizzare i dati in seguito. Per affrontare queste sfide, è stato creato un nuovo strumento chiamato PilotAR per migliorare gli studi pilota in AR e MR.
Cos'è PilotAR?
PilotAR è uno strumento che aiuta i ricercatori a condurre studi pilota utilizzando visori ottici a montaggio sulla testa (HMD). Questi dispositivi, spesso noti come occhiali smart, permettono agli utenti di vedere immagini digitali sovrapposte al mondo reale. PilotAR facilita l'osservazione e la registrazione di come gli utenti interagiscono con questi dispositivi in tempo reale. Lo strumento offre funzionalità per vedere cosa vedono gli utenti, prendere appunti e osservare le interazioni degli utenti simultaneamente da diverse prospettive.
Perché gli studi pilota sono importanti?
Gli studi pilota giocano un ruolo cruciale nella ricerca. Aiutano a convalidare idee, trovare problemi di usabilità e guidare le scelte di design senza spendere troppe risorse. In AR e MR, questi studi diventano ancora più importanti poiché affrontano ambienti complessi che combinano elementi reali e digitali. Questo richiede una comprensione più profonda di come gli utenti interagiscono sia con il mondo fisico che con i contenuti digitali.
Sfide negli studi pilota AR/MR
Condurre studi pilota in AR e MR introduce diverse difficoltà. Innanzitutto, gli utenti indossano dispositivi che forniscono visualizzazioni personali e vicine agli occhi, rendendo difficile per un ricercatore osservare le loro azioni. A differenza degli studi tradizionali su schermi piatti, AR e MR richiedono di osservare gli utenti sia da un punto di vista di prima persona (cosa vedono gli utenti) che da un punto di vista di terza persona (cosa fanno gli utenti nello spazio fisico).
In secondo luogo, i ricercatori spesso devono gestire più compiti contemporaneamente, come operare il dispositivo e osservare gli utenti, il che aumenta il carico di lavoro. Infine, la raccolta dati durante questi studi tende ad essere informale, rendendo difficile analizzare i dati immediatamente o condurre discussioni approfondite dopo lo studio.
Caratteristiche di PilotAR
PilotAR mira a semplificare il processo di conduzione degli studi pilota in AR e MR. Include diverse caratteristiche principali:
Osservazioni Multi-View
PilotAR fornisce strumenti per flussi video sia di prima persona che di terza persona. Questo significa che i ricercatori possono vedere cosa vedono gli utenti attraverso i loro occhiali smart mentre osservano anche le loro azioni nello spazio fisico. Questi flussi video vengono registrati per un'analisi successiva, permettendo ai ricercatori di comprendere le interazioni degli utenti in tempo reale.
Monitoraggio e Annotazioni in Tempo Reale
Lo strumento consente ai ricercatori di segnare momenti importanti durante gli esperimenti. Possono rapidamente registrare metriche, tracciare interazioni e prendere appunti usando scorciatoie da tastiera. Questa funzionalità aiuta a garantire che eventi significativi siano documentati e facilmente accessibili per revisioni future.
Supporto per Più Ricercatori
PilotAR può essere utilizzato da più di un ricercatore contemporaneamente. In uno scenario con più sperimentatori, un ricercatore può gestire lo strumento mentre un altro si concentra esclusivamente sull'osservazione dell'utente. Questa divisione dei compiti riduce il carico di lavoro per ciascun ricercatore, rendendo più facile condurre studi approfonditi.
Sommari dei Dati in Tempo Reale
PilotAR fornisce un riassunto delle osservazioni in tempo reale. Questo aiuta i ricercatori a identificare momenti chiave mentre accadono e li prepara per interviste post-studio con i partecipanti. Lo strumento consente anche l'esportazione facile di report sui dati, facilitando la condivisione dei risultati con i colleghi.
Come utilizzare PilotAR
Utilizzare PilotAR di solito implica una serie di passaggi, che possono essere raggruppati in tre fasi: configurazione, conduzione dello studio pilota e analisi dei risultati.
Fase di Configurazione
Nella fase di configurazione, i ricercatori configurano i dispositivi e gli strumenti di cui avranno bisogno durante lo studio. Questo include collegare gli occhiali smart, impostare telecamere per diversi punti di vista e scegliere quali funzioni utilizzeranno durante il pilota. I ricercatori si assicurano che tutto funzioni correttamente completando una checklist.
Fase Pilota
Durante la fase pilota, il ricercatore osserva le interazioni del partecipante con i contenuti AR. Possono visualizzare simultaneamente le prospettive di prima e terza persona, consentendo loro di catturare dati su come il partecipante si impegna sia con elementi digitali che con il proprio ambiente reale. I ricercatori possono fare annotazioni per notare interazioni chiave e sfide affrontate dai partecipanti.
Fase di Analisi
Dopo lo studio pilota, i ricercatori analizzano i dati raccolti. Hanno accesso ai video registrati, alle annotazioni e ai riassunti in tempo reale. Lo strumento consente loro di filtrare e rivedere le annotazioni per ottenere una comprensione migliore delle interazioni e delle esperienze degli utenti. I ricercatori possono anche esportare queste informazioni per condividerle con altri membri del team o per ulteriori analisi.
Esempio Pratico
Per illustrare come funziona PilotAR, considera uno scenario in cui i ricercatori stanno studiando una nuova interfaccia AR che aiuta gli utenti a localizzare oggetti in una stanza. Durante la fase di configurazione, preparano i dispositivi necessari e configurano lo strumento.
Nella fase pilota, osservano un partecipante mentre interagisce con l'interfaccia AR. I ricercatori possono vedere cosa vede il partecipante mentre osservano anche come si muove nell'ambiente. Fanno annotazioni sui momenti in cui il partecipante ha difficoltà o ha successo.
Infine, durante la fase di analisi, i ricercatori rivedono i filmati e le annotazioni per identificare schemi o problemi ricorrenti. Possono scoprire che gli utenti hanno spesso difficoltà a trovare oggetti situati a diverse altezze, portandoli a considerare modifiche al design dell'interfaccia.
Conclusione
PilotAR rappresenta un significativo miglioramento nel modo in cui i ricercatori possono condurre studi pilota in AR e MR. Offrendo strumenti per l'osservazione in tempo reale, la raccolta di dati e l'analisi, PilotAR supporta i ricercatori nel ottenere intuizioni più profonde sulle interazioni degli utenti. Con il continuo avanzamento della tecnologia AR e MR, strumenti come PilotAR saranno essenziali per affinare il nostro modo di interagire con i mondi digitali e fisici. Migliorando gli studi pilota, i ricercatori possono comprendere meglio le esigenze degli utenti e migliorare il design complessivo delle esperienze AR e MR.
Titolo: Demonstrating PilotAR: A Tool to Assist Wizard-of-Oz Pilot Studies with OHMD
Estratto: While pilot studies help to identify potential interesting research directions, the additional requirements in AR/MR make it challenging to conduct quick and dirty pilot studies efficiently with Optical See-Through Head-Mounted Displays (OST HMDs, OHMDs). To overcome these challenges, including the inability to observe and record in-context user interactions, increased task load, and difficulties with in-context data analysis and discussion, we introduce PilotAR (https://github.com/Synteraction-Lab/PilotAR), a tool designed iteratively to enhance AR/MR pilot studies, allowing live first-person and third-person views, multi-modal annotations, flexible wizarding interfaces, and multi-experimenter support.
Autori: Nuwan Janaka, Runze Cai, Shengdong Zhao, David Hsu
Ultimo aggiornamento: 2024-07-17 00:00:00
Lingua: English
URL di origine: https://arxiv.org/abs/2407.12388
Fonte PDF: https://arxiv.org/pdf/2407.12388
Licenza: https://creativecommons.org/licenses/by/4.0/
Modifiche: Questa sintesi è stata creata con l'assistenza di AI e potrebbe presentare delle imprecisioni. Per informazioni accurate, consultare i documenti originali collegati qui.
Si ringrazia arxiv per l'utilizzo della sua interoperabilità ad accesso aperto.
Link di riferimento
- https://docs.python.org/3/library/tkinter.html
- https://github.com/TomSchimansky/CustomTkinter
- https://pypi.org/project/pynput
- https://ffmpeg.org
- https://pypi.org/project/python-vlc/
- https://openai.com/blog/whisper/
- https://github.com/Synteraction-Lab/PilotAR
- https://www.acm.org/publications/taps/whitelist-of-latex-packages
- https://ctan.org/pkg/fp
- https://tex.stackexchange.com/questions/20140/can-a-table-include-a-horizontal-dashed-line
- https://tex.stackexchange.com/questions/70143/cross-reference-with-custom-text
- https://stackoverflow.com/questions/2888817/footnotes-for-tables-in-latex
- https://tex.stackexchange.com/questions/346211/partially-colored-cells
- https://dl.acm.org/ccs.cfm