Simple Science

Ciência de ponta explicada de forma simples

# Informática# Visão computacional e reconhecimento de padrões

Monitorando o Engajamento dos Alunos em Aprendizado Online

Novo método usa movimentos faciais pra avaliar a atenção dos alunos durante a educação remota.

Aimar Silvan Ortubay, Lucas C. Parra, Jens Madsen

― 7 min ler


Monitoramento deMonitoramento deEngajamento de MovimentoFacialonline.dos alunos melhora o aprendizadoO acompanhamento em tempo real do foco
Índice

No mundo de hoje, aprender online virou uma forma comum de acessar a educação. Mas os alunos costumam ter dificuldade em se manter focados durante as aulas remotas. Os professores geralmente usam dicas visuais pra perceber se os alunos estão engajados, mas essas dicas não existem nas aulas online. Isso faz com que precise de ferramentas melhores pra ajudar os professores a saber quando os alunos estão prestando atenção.

O Desafio do Aprendizado Online

A mudança pro aprendizado online, especialmente durante a pandemia, dificultou a manutenção do interesse dos alunos. As aulas presenciais tradicionais ofereciam interações que mantinham os alunos envolvidos. Infelizmente, o ambiente remoto limitou essas interações, fazendo com que os alunos perdessem o foco mais fácil.

Atualmente, muitos professores usam métodos como listas de verificação e pesquisas pra avaliar se os alunos estão engajados. Mas esses métodos podem ser intrusivos e demorados. Muitas vezes, não refletem com precisão como os alunos se sentem a cada momento. Algumas ferramentas rastreiam quantas vezes um vídeo foi assistido ou quanto tempo ele foi visualizado, mas esses métodos podem não mostrar verdadeiramente os níveis de Engajamento.

Tem um interesse crescente em usar tecnologia pra rastrear o engajamento dos alunos. Alguns pesquisadores estão olhando pro uso de sinais físicos como batimentos cardíacos ou atividade neural. Outros têm confiado em rastrear os movimentos dos olhos pra medir o quanto os alunos estão envolvidos. No entanto, muitos desses métodos precisam de equipamentos caros e podem ser complicados de configurar.

Uma Nova Abordagem

Esse novo método foca em analisar os Movimentos Faciais dos alunos capturados por uma webcam comum. O objetivo é medir o engajamento observando movimentos nos olhos, cabeça e expressões faciais. Diferente de outros métodos, essa abordagem não precisa de equipamentos especiais ou calibração.

Treinando um Modelo de aprendizado profundo com vídeos de alunos assistindo a materiais educativos, os pesquisadores querem prever o quão engajado um aluno está. O sistema pode inferir a atenção olhando ações específicas, como os movimentos dos olhos, sem depender de dados de outros alunos atentos. Isso oferece muitas novas possibilidades pra monitorar o engajamento online.

Como Funciona

A pesquisa envolve rastrear os movimentos do rosto de um aluno usando um programa de computador chamado MediaPipe. Essa ferramenta é leve e pode rodar em dispositivos comuns como laptops, tornando-a acessível pra maioria dos usuários. O MediaPipe captura as posições das características faciais e fornece dados Em tempo real sem nenhuma configuração.

O método foi desenvolvido usando vídeos existentes onde participantes assistiam a conteúdos educacionais. Analisando esses vídeos, os pesquisadores treinaram um modelo que consegue prever o quão engajado um aluno está apenas com base nos seus movimentos faciais. Esse sistema pode dar feedback em tempo real, permitindo que os professores saibam quando os alunos precisam ser reengajados.

Três experimentos separados foram realizados pra testar o modelo. Nesses experimentos, os alunos assistiram a vídeos educativos curtos. Os pesquisadores então avaliaram se o modelo poderia prever com precisão os níveis de atenção deles com base nos movimentos faciais.

Insights dos Experimentos

No primeiro experimento, o modelo previu a atenção com base em uma parte do tempo de visualização, enquanto o segundo experimento testou um novo grupo assistindo os mesmos vídeos. O terceiro experimento envolveu um conjunto de vídeos totalmente diferente. No total, a coleta de dados ocorreu ao longo de várias horas em diferentes tópicos educacionais, permitindo uma análise ampla.

Durante esses experimentos, o sistema mostrou que conseguia generalizar dos dados de treinamento pra novos assuntos e vídeos. Em termos simples, o modelo aprendeu a prever os níveis de atenção mesmo quando os alunos não estavam familiarizados com o material, o que é um grande avanço.

O Papel dos Movimentos Faciais

Os pesquisadores focaram em pontos faciais, que são pontos específicos no rosto que podem indicar níveis de atenção. Eles rastrearam movimentos nos olhos, sobrancelhas, bochechas e na posição da cabeça, usando isso pra criar uma imagem completa de quão engajado um aluno está a qualquer momento.

O modelo se baseia muito nos movimentos dos olhos, mas também leva em conta outras dinâmicas faciais. Avaliando esses dados, o sistema fornece uma estimativa de engajamento sem precisar olhar como outros alunos respondem ao mesmo conteúdo em vídeo. Isso é essencial, especialmente em ambientes de aprendizagem remota onde a colaboração é limitada.

Previsões em Tempo Real

Usando o modelo treinado, os pesquisadores conseguiram prever o engajamento de um aluno em tempo real. Essa previsão é baseada em apenas dez segundos de dados de movimento facial. O sistema processa as características de movimento facial e da cabeça, permitindo que monitore continuamente os níveis de engajamento. Isso significa que os professores podem receber feedback imediato sobre quais alunos estão focados e quais podem precisar de ajuda pra voltar a se concentrar.

Vantagens da Abordagem

Uma grande vantagem desse sistema é sua capacidade de rodar em hardware de computador padrão, o que o torna econômico e fácil de implementar. Como funciona diretamente através de webcams, há menos preocupações com privacidade. Apenas os dados de engajamento seriam enviados, preservando a privacidade dos alunos.

Além disso, esse modelo oferece uma forma de avaliar continuamente o engajamento sem interromper o processo de aprendizagem. Métodos tradicionais podem ser disruptivos, mas essa abordagem permite que os professores obtenham insights sobre o engajamento dos alunos de forma passiva.

A Importância do Engajamento na Aprendizagem

O engajamento é um fator chave na aprendizagem efetiva. Quando os alunos estão ativamente envolvidos, eles têm mais chances de reter informações e se sair melhor academicamente. Com esse novo método, os educadores podem ter uma visão mais clara de quão engajados seus alunos estão, mesmo em um ambiente online.

Ao rastrear movimentos e comportamentos faciais, os professores podem ajustar sua abordagem pra melhor atender às necessidades dos alunos. Por exemplo, se perceberem que uma certa parte de uma aula faz os alunos perderem o interesse, podem mudar a forma como apresentam ou introduzir novos materiais que possam engajar mais os alunos.

Possibilidades Futuras

Embora esse estudo tenha mostrado resultados promissores, ainda há espaço pra melhorias. Os pesquisadores acreditam que reunir um conjunto de dados maior vai aumentar a precisão do modelo. Isso vai ajudar a garantir que ele possa ser aplicado em diferentes ambientes de aprendizagem e com uma variedade maior de vídeos.

No geral, os achados sugerem que o monitoramento de engajamento em tempo real usando análise de movimentos faciais pode se tornar uma ferramenta valiosa pra educadores. Ao abraçar a tecnologia, os professores podem encontrar novas maneiras de fomentar o engajamento e melhorar os resultados de aprendizagem dos alunos.

Conclusão

Em resumo, essa abordagem inovadora fornece insights em tempo real sobre o engajamento dos alunos durante o aprendizado online. Ao utilizar movimentos faciais capturados por webcams comuns, os professores podem receber feedback imediato sobre quais alunos estão focados e quais podem estar tendo dificuldades. Com mais refinamentos, esse método tem potencial pra transformar a maneira como o engajamento é monitorado em salas de aula online, levando a experiências educacionais mais eficazes.

Fonte original

Título: Real-time estimation of overt attention from dynamic features of the face using deep-learning

Resumo: Students often drift in and out of focus during class. Effective teachers recognize this and re-engage them when necessary. With the shift to remote learning, teachers have lost the visual feedback needed to adapt to varying student engagement. We propose using readily available front-facing video to infer attention levels based on movements of the eyes, head, and face. We train a deep learning model to predict a measure of attention based on overt eye movements. Specifically, we measure Inter-Subject Correlation of eye movements in ten-second intervals while students watch the same educational videos. In 3 different experiments (N=83) we show that the trained model predicts this objective metric of attention on unseen data with $R^2$=0.38, and on unseen subjects with $R^2$=0.26-0.30. The deep network relies mostly on a student's eye movements, but to some extent also on movements of the brows, cheeks, and head. In contrast to Inter-Subject Correlation of the eyes, the model can estimate attentional engagement from individual students' movements without needing reference data from an attentive group. This enables a much broader set of online applications. The solution is lightweight and can operate on the client side, which mitigates some of the privacy concerns associated with online attention monitoring. GitHub implementation is available at https://github.com/asortubay/timeISC

Autores: Aimar Silvan Ortubay, Lucas C. Parra, Jens Madsen

Última atualização: 2024-09-25 00:00:00

Idioma: English

Fonte URL: https://arxiv.org/abs/2409.13084

Fonte PDF: https://arxiv.org/pdf/2409.13084

Licença: https://creativecommons.org/licenses/by-sa/4.0/

Alterações: Este resumo foi elaborado com a assistência da AI e pode conter imprecisões. Para obter informações exactas, consulte os documentos originais ligados aqui.

Obrigado ao arxiv pela utilização da sua interoperabilidade de acesso aberto.

Artigos semelhantes