Novo Dispositivo Prevê Movimentos dos Braços Humanos para Melhor Assistência Robótica
Sensores vestíveis ajudam robôs a prever os movimentos dos braços humanos direitinho.
― 8 min ler
Índice
- A Importância da Colaboração
- O Papel dos Dispositivos Vestíveis
- O Problema com Métodos Dependentes da Visão
- Desenvolvendo um Novo Modelo de Previsão
- Configurando o Experimento
- Abordando Variações no Movimento
- Avaliando o Modelo de Posição do Pulso
- Previsão de Alvos
- Colaboração Humano-Robô em Tempo Real
- Taxas de Sucesso e Descobertas
- Conclusão
- Fonte original
- Ligações de referência
Nas tarefas do dia a dia, as pessoas geralmente precisam trabalhar juntas e passar objetos umas para as outras. Para os robôs ajudarem de maneiras semelhantes, eles precisam saber onde está o braço humano a qualquer momento. Isso significa que os robôs não devem apenas reagir, mas também antecipar o que uma pessoa vai fazer a seguir. Ao prever o alvo de um movimento de alcançar, os robôs podem se preparar para ajudar antes da ação acontecer.
Este artigo fala sobre uma nova abordagem para rastrear os movimentos do braço humano usando um dispositivo vestível com sensores. Esses sensores vão ajudar o robô a interagir com os humanos Em tempo real, mesmo quando a visibilidade é ruim ou o ambiente está bagunçado. O foco principal é usar um dispositivo simples que pode ser usado no braço, equipado com sensores de movimento conhecidos como Unidades de Medida Inercial (IMUs).
A Importância da Colaboração
Quando duas pessoas trabalham juntas, elas conseguem adivinhar o que a outra pessoa pretende fazer. Por exemplo, se uma pessoa se estica para passar um objeto, a outra pode prever para onde esse objeto vai e se preparar para recebê-lo. Os robôs também precisam aprender a fazer isso. Essa habilidade é importante em várias situações, como passar itens, colaborar em espaços de trabalho compartilhados, evitar colisões ou até mesmo em ambientes virtuais.
Entender os movimentos do braço humano é um tema de estudo há muitos anos. Pesquisadores têm explorado como os humanos alcançam objetos, tentando identificar padrões de movimento. Enquanto estudos anteriores se concentraram em usar câmeras e pistas visuais para entender esses movimentos, esses métodos podem ter dificuldades em situações de pouca luz ou quando objetos obstruem a visão.
O Papel dos Dispositivos Vestíveis
Dispositivos vestíveis equipados com sensores podem ajudar a superar os desafios que os métodos visuais enfrentam. Essas IMUs podem coletar dados diretamente do braço humano, proporcionando uma melhor compreensão do seu movimento. Essa tecnologia pode ser especialmente útil quando as pistas visuais tradicionais são pouco confiáveis devido à iluminação ou desordem.
Uma abordagem específica envolve usar duas IMUs, uma no braço superior e outra no antebraço. Esses sensores permitem que o dispositivo colete informações sobre como o braço está se movendo em tempo real. Os pesquisadores estão treinando um modelo com esses dados para prever para onde o braço vai a seguir.
O Problema com Métodos Dependentes da Visão
Confiar apenas em câmeras e rastreamento visual tem suas limitações. Em situações onde a visibilidade é baixa ou objetos bloqueiam a visão, a capacidade de um robô determinar onde um humano está alcançando se torna difícil. Além disso, usar câmeras exige grandes quantidades de dados e recursos computacionais poderosos.
Para enfrentar esses desafios, os pesquisadores têm buscado métodos alternativos usando sensores vestíveis. Por exemplo, dispositivos como eletromiografia (EMG) e interfaces cérebro-computador foram testados para prever as intenções humanas. No entanto, usar IMUs mostra grande potencial devido à sua eficácia e custo relativamente baixo.
Modelo de Previsão
Desenvolvendo um NovoO objetivo deste estudo é criar um modelo que permita previsões em tempo real do movimento do braço humano sem depender de entrada visual. Usando dados brutos das IMUs no braço humano, os pesquisadores estão investigando como prever para onde o braço vai alcançar durante o movimento.
Um aspecto significativo desse trabalho é treinar um modelo de Memória de Longo Prazo (LSTM). As LSTMS são úteis para analisar dados baseados no tempo, tornando-as ideais para observar como o braço se move ao longo do tempo. Elas podem captar padrões e dependências nos dados que podem levar a previsões precisas.
Para construir o modelo de previsão, os pesquisadores coletam dados por meio de várias tarefas de alcance. À medida que os participantes se esticam para diferentes alvos, as IMUs registram dados de movimento. Essas informações ajudam a criar um conjunto de dados que pode treinar o modelo.
Os pesquisadores focam em dois objetivos:
- Determinar a posição atual do pulso.
- Prever para onde o pulso provavelmente irá a seguir.
Ao cumprir essas tarefas, o modelo pode ajudar um robô a planejar seu movimento de acordo.
Configurando o Experimento
Para os experimentos, foi projetado um dispositivo vestível que inclui duas IMUs e um sistema de gravação de dados. O dispositivo oferece um fluxo de dados em tempo real sobre o movimento, permitindo que os pesquisadores analisem os movimentos de alcance de forma eficaz.
Os participantes participam de várias tentativas nas quais se esticam em direção a áreas-alvo designadas. O dispositivo registra as posições dos braços deles ao longo das tentativas, criando um conjunto de dados abrangente. Esses dados são então processados para treinar o modelo, permitindo que ele aprenda como o braço se move e onde é provável que alcance a seguir.
Abordando Variações no Movimento
Cada indivíduo tem movimentos de braço únicos dependendo de fatores como forma e tamanho do corpo. Essa variabilidade pode complicar a conclusão de tarefas e previsões. Portanto, os pesquisadores garantem que os dados coletados reflitam uma ampla gama de movimentos de braço em diferentes poses.
Cada participante do estudo foi incentivado a realizar várias tarefas de alcance a partir de diferentes posições iniciais. Ao ter um conjunto de dados diversificado, os pesquisadores podem treinar melhor o modelo para lidar com a variabilidade nos movimentos dos braços.
Avaliando o Modelo de Posição do Pulso
Para avaliar o quão bem o modelo prevê a posição do pulso, os pesquisadores analisam sua precisão testando diferentes configurações dos dados das IMUs. Eles comparam o desempenho de modelos usando várias combinações de entrada de sensores para identificar qual configuração fornece os melhores resultados.
Após testes extensivos, os resultados mostram que o modelo mais eficaz combina dados de todos os sensores disponíveis. Essa abordagem abrangente gera a maior precisão na estimativa da posição do pulso durante as tarefas de alcance.
Previsão de Alvos
Após a avaliação da posição do pulso, a atenção se volta para prever o alvo do movimento de alcance. O objetivo é entender como o braço vai se mover e onde vai alcançar a seguir, com base nos dados coletados anteriormente.
Os pesquisadores desenvolvem um modelo de previsão usando uma rede LSTM que incorpora informações sobre a posição do pulso. Ao fornecer uma sequência de pontos de dados passados, o modelo aprende a prever onde o pulso vai acabar com base em movimentos anteriores.
Uma descoberta chave durante a pesquisa é que adicionar a posição aproximada do pulso aos dados de entrada melhora a capacidade preditiva do modelo. Ao treinar com esses novos dados, o modelo alcança melhorias significativas na precisão.
Colaboração Humano-Robô em Tempo Real
Após estabelecer um modelo de previsão sólido, os pesquisadores realizam experimentos para demonstrar sua eficácia em tempo real. Os participantes se esticam em direção a um braço robótico enquanto o robô recebe previsões contínuas sobre para onde o braço humano irá a seguir.
Quando o robô recebe sua primeira previsão, ele começa a planejar seu movimento para se encontrar com o braço humano. À medida que novas previsões chegam, o robô ajusta seu movimento de acordo. Essa abordagem leva a resultados impressionantes, mostrando altas taxas de sucesso no robô alcançando o alvo desejado à medida que o participante humano estica seu braço.
Taxas de Sucesso e Descobertas
As tentativas envolvendo vários participantes geram resultados favoráveis. O robô alcança com sucesso uma proximidade próxima da mão humana na maioria dos casos. Essa conquista é especialmente notável, pois alguns participantes não contribuíram com dados durante o treinamento do modelo.
Por meio desses testes, fica claro que o modelo infere efetivamente os padrões de movimento humano. Ao aprender com as sequências de dados de movimento, o modelo pode generalizar e se adaptar a diferentes usuários, levando a interações bem-sucedidas.
Conclusão
A pesquisa destaca o valor de utilizar dispositivos vestíveis com IMUs para prever o movimento do braço humano. Os modelos desenvolvidos aqui permitem que robôs antecipem tarefas de alcance humano em tempo real, mesmo sem depender de informações visuais. Essa capacidade é significativa para melhorar a colaboração entre humanos e robôs em várias situações.
Com uma configuração acessível e leve, a abordagem mostra potencial para aplicações no mundo real. Pesquisas futuras podem aprimorar a adaptabilidade do modelo a novos usuários ou combiná-lo com tecnologias adicionais para uma precisão ainda maior.
Os resultados demonstram como um dispositivo simples pode ser poderoso para facilitar colaborações entre humanos e robôs e fornecer assistência em diversas tarefas. Este trabalho abre portas para investigações adicionais sobre como refinar esses sistemas para se adaptar a diferentes ambientes e casos de uso.
Título: Learning Human-arm Reaching Motion Using IMU in Human-Robot Collaboration
Resumo: Many tasks performed by two humans require mutual interaction between arms such as handing-over tools and objects. In order for a robotic arm to interact with a human in the same way, it must reason about the location of the human arm in real-time. Furthermore and to acquire interaction in a timely manner, the robot must be able predict the final target of the human in order to plan and initiate motion beforehand. In this paper, we explore the use of a low-cost wearable device equipped with two inertial measurement units (IMU) for learning reaching motion for real-time applications of Human-Robot Collaboration (HRC). A wearable device can replace or be complementary to visual perception in cases of bad lighting or occlusions in a cluttered environment. We first train a neural-network model to estimate the current location of the arm. Then, we propose a novel model based on a recurrent neural-network to predict the future target of the human arm during motion in real-time. Early prediction of the target grants the robot with sufficient time to plan and initiate motion during the motion of the human. The accuracies of the models are analyzed concerning the features included in the motion representation. Through experiments and real demonstrations with a robotic arm, we show that sufficient accuracy is achieved for feasible HRC without any visual perception. Once trained, the system can be deployed in various spaces with no additional effort. The models exhibit high accuracy for various initial poses of the human arm. Moreover, the trained models are shown to provide high success rates with additional human participants not included in the model training.
Autores: Nadav D. Kahanowich, Avishai Sintov
Última atualização: 2023-08-26 00:00:00
Idioma: English
Fonte URL: https://arxiv.org/abs/2308.13936
Fonte PDF: https://arxiv.org/pdf/2308.13936
Licença: https://creativecommons.org/licenses/by/4.0/
Alterações: Este resumo foi elaborado com a assistência da AI e pode conter imprecisões. Para obter informações exactas, consulte os documentos originais ligados aqui.
Obrigado ao arxiv pela utilização da sua interoperabilidade de acesso aberto.