Stringestesia: Uma Nova Abordagem para Performances Ao Vivo
Uma experiência única de música ao vivo que mistura interação com a galera e tecnologia.
― 6 min ler
Índice
Stringesthesia é um tipo único de performance ao vivo que junta músicos e a galera de um jeito interativo e improvisado. O objetivo é criar uma experiência compartilhada onde tanto o performer quanto o público se sintam conectados, principalmente através de Confiança. Esse rolê é turbinado por tecnologia que mede o estado mental do performer em tempo real, permitindo uma relação dinâmica entre o músico e a audiência.
O Conceito de Confiança na Performance
Confiança é fundamental para uma cooperação bem-sucedida em qualquer ambiente de performance. Em Stringesthesia, tanto o performer quanto o público precisam confiar um no outro para criar uma experiência musical legal. Quando a confiança tá rolando, a galera pode participar mais; eles conseguem influenciar a música que tá tocando. Mas, se a confiança tá baixa, o performer pode ter uma participação bem limitada do público.
Muitas vezes, a confiança foi estudada em interações entre humanos e máquinas, onde diferentes características podem afetar o quanto as pessoas confiam nesses sistemas. Por exemplo, se uma máquina dá informações inconsistentes, os usuários podem ignorar. Da mesma forma, na música, se os ritmos tocados pela audiência forem confusos ou muito estáticos, isso pode enfraquecer a colaboração com o performer.
Improvisação Interativa
Em Stringesthesia, o público não é só um ouvinte passivo, mas um participante ativo. Eles podem contribuir para a performance controlando vários elementos como o ritmo ou o volume da música. Alguns músicos já chamaram a galera pra esse tipo de espaço participativo antes, onde o público pode sugerir direções musicais. O desafio tá em equilibrar quanto controle dar ao público versus o performer.
Os músicos têm usado diferentes métodos para criar uma conexão entre performers e Públicos em ambientes interativos. Dispositivos como sensores acompanham respostas físicas e emocionais, criando uma conexão mais profunda. A bio-sensoriamento é um método que foi testado, permitindo que a audiência participe da performance e se sinta mais envolvida.
A Tecnologia por Trás do Stringesthesia
Stringesthesia usa uma técnica chamada espectroscopia de infravermelho funcional, ou fNIRS, que mede a atividade cerebral monitorando o fluxo sanguíneo. Nessa performance, o fNIRS ajuda a monitorar os níveis de confiança do performer, e essa informação é usada para ajustar quanto de liberdade o público tem pra participar.
Uma vantagem do fNIRS em relação a outras técnicas de imagem cerebral é que ele pode ser usado em ambientes do mundo real sem ser muito invasivo. Diferente de outros métodos, ele dá informações mais claras sobre as áreas do cérebro ativas durante tarefas diferentes, tornando-o uma escolha adequada para performances criativas.
Como Funciona a Performance
A performance de Stringesthesia acontece em um espaço especialmente projetado, equipado com ferramentas audiovisuais. O público e o performer interagem através de uma série de sets musicais, permitindo várias maneiras de se envolver. Antes de cada segmento, a galera é convidada a escolher cores que correspondem a acordes musicais. Essas escolhas impactam o que o performer toca.
O performer treinou para relacionar cores específicas a acordes em uma escala musical. Conforme a confiança aumenta, o público pode se envolver mais ao selecionar acordes para o performer usar. Assim, a performance reage em tempo real com base na participação do público.
Envolvimento da Audiência
A Interação do público é um elemento-chave do Stringesthesia. O design incentiva os participantes a se envolverem com instrumentos simples e ferramentas de seleção de cores. Quando a galera sente uma conexão com o performer, a participação deles na música se torna mais significativa.
Durante a performance, o público pode se mover, escolher instrumentos e interagir de várias maneiras. A performance é estruturada para permitir momentos de feedback e reflexão, mantendo o público engajado enquanto dá tempo pro performer resetar.
O Papel das Visualizações
Uma parte significativa do Stringesthesia são os elementos visuais que acompanham a música. As visualizações representam o nível de confiança do performer em tempo real. Conforme o performer sente mais confiança, as visualizações ficam mais pronunciadas. Isso cria um sinal visual pro público, ajudando a entender a conexão entre suas ações e a música.
Os elementos visuais têm como objetivo criar uma metáfora para a relação entre o performer e o público. Eles são projetados pra serem imersivos, refletindo a energia da performance e encorajando a galera a se envolver mais profundamente.
Feedback do Público e do Performer
Depois de cada performance, o feedback é coletado tanto do público quanto do performer. Essa informação é vital pra entender o sucesso da performance e as áreas que podem ser melhoradas.
Os membros da audiência costumam expressar que se sentem conectados tanto à música quanto uns aos outros. Os comentários deles destacam aspectos positivos de suas experiências, como um senso de envolvimento e inspiração. No entanto, alguns podem achar as visualizações muito abstratas ou confusas, sugerindo a necessidade de representações mais diretas.
Para o performer, as observações deles oferecem insights sobre a dinâmica da performance. Eles podem notar como a empolgação do público melhora a atmosfera ou como certos momentos permitem uma maior liberdade musical.
Limitações e Direções Futuras
Embora Stringesthesia apresente um modelo de performance inovador, há limitações. Uma preocupação é que os dados do fNIRS, que rastreiam a atividade cerebral, têm um atraso. Esse tempo de lag afeta como a performance é estruturada e como os níveis de confiança são interpretados.
Futuras performances poderiam se beneficiar do uso de elementos musicais mais diversos e explorar novas maneiras de engajar o público. Por exemplo, expandir o número de cores e acordes selecionáveis ou incorporar outras Tecnologias que medem respostas emocionais poderia aprimorar a experiência interativa.
Incorporar feedback de performances anteriores ajudará a refinar a estrutura e melhorar a comunicação sobre as visualizações de confiança. No final, o objetivo é criar uma experiência enriquecedora tanto para o performer quanto para os membros do público, onde confiança e colaboração levam a momentos musicais memoráveis.
Conclusão
Stringesthesia é uma abordagem nova pra performance ao vivo, enfatizando o papel vital da confiança na colaboração musical. Ao integrar tecnologia que mede o estado mental do performer, a performance cria uma atmosfera única onde a participação da audiência é não só encorajada, mas essencial. A mistura de música, visuais e interatividade fomenta um senso de conexão que enriquece a experiência tanto para o performer quanto para o público.
À medida que a prática se desenvolve, ela oferece possibilidades empolgantes para aumentar o engajamento e explorar novas dimensões musicais, tornando as performances ao vivo mais inclusivas e impactantes.
Título: Stringesthesia: Dynamically Shifting Musical Agency Between Audience and Performer Based on Trust in an Interactive and Improvised Performance
Resumo: This paper introduces Stringesthesia, an interactive and improvised performance paradigm. Stringesthesia uses real-time neuroimaging to connect performers and audiences, enabling direct access to the performers mental state and determining audience participation during the performance. Functional near-infrared spectroscopy, or fNIRS, a noninvasive neuroimaging tool, was used to assess metabolic activity of brain areas collectively associated with a metric we call trust. A visualization representing the real-time measurement of the performers level of trust was projected behind the performer and used to dynamically restrict or promote audience participation. Throughout the paper we discuss prior work that heavily influenced our design, conceptual and methodological issues with using fNIRS technology, system architecture, and feedback from the audience and performer.
Autores: Torin Hopkins, Emily Doherty, Netta Ofer, Suibi Che Chuan Weng, Peter Gyrory, Chad Tobin, Leanne Hirshfield, Ellen Yi-Luen Do
Última atualização: 2023-09-11 00:00:00
Idioma: English
Fonte URL: https://arxiv.org/abs/2309.05786
Fonte PDF: https://arxiv.org/pdf/2309.05786
Licença: https://creativecommons.org/licenses/by/4.0/
Alterações: Este resumo foi elaborado com a assistência da AI e pode conter imprecisões. Para obter informações exactas, consulte os documentos originais ligados aqui.
Obrigado ao arxiv pela utilização da sua interoperabilidade de acesso aberto.