Performing the Immersive: Electroacoustic Music at the Threshold of Technology

César Rennó-Costa; Alyson Souza; Stefane Orichuela; João Anisio da Nobrega; Leonardo Pereira; Jonatas Manzolli; Cleber Campos

doi:10.33871/vortex.2026.14.11748

Autores

César Rennó-Costa Universidade Federal do Rio Grande do Norte https://orcid.org/0000-0003-0417-8108
Alyson Souza Universidade Federal do Rio Grande do Norte https://orcid.org/0000-0003-2706-7400
Stefane Orichuela Universidade Federal do Rio Grande do Norte https://orcid.org/0009-0008-6827-4282
João Anisio da Nobrega Universidade Federal do Rio Grande do Norte https://orcid.org/0009-0007-0599-8227
Leonardo Pereira Universidade Federal do Rio Grande do Norte https://orcid.org/0000-0003-0483-3010
Jonatas Manzolli Universidade Estadual de Campinas https://orcid.org/0000-0003-4257-7118
Cleber Campos Universidade Federal do Rio Grande do Norte https://orcid.org/0000-0003-2666-916X

DOI:

https://doi.org/10.33871/vortex.2026.14.11748

Palavras-chave:

Interactive Systems Design, Human-AI Co-creation, Embodied Interaction, Interpretive Ecosystems, Audience Agency

Resumo

Investiga-se como a convergência entre tecnologias imersivas e música eletroacústica molda as propriedades emergentes da performance contemporânea. A transição da obra musical de suporte fixo (tape) para ambientes interativos e exploráveis redefine as fronteiras da autoria e os papéis de compositor e de intérprete. Nesse cenário, o público deixa a passividade e assume o papel de participante ativo, moldando a experiência sonora em tempo real. A performance torna-se um processo emergente, resultante da interação entre a ação humana e os sistemas generativos. Os resultados imprevisíveis abrem portas para novas formas de fluidez estética. O foco passa da noção de produto final ou obra acabada para o desenvolvimento dinâmico do processo criativo. Cada obra adquire suas características por meio das possibilidades criativas que oferece, do seu design interativo e da qualidade da experiência resultante. Neste modelo, o papel principal do artista é projetar um mundo para a performance musical colaborativa.

Downloads

Não há dados estatísticos.

Biografia do Autor

César Rennó-Costa, Universidade Federal do Rio Grande do Norte

César Rennó-Costa is an Associate Professor at the Digital Metropolis Institute (IMD) of the Federal University of Rio Grande do Norte (UFRN), where he coordinates the Bioinformatics Multidisciplinary Environment (BIOME). A computer engineer with an extensive background in sound engineering and cognitive sciences, he has spent over two decades developing theoretical and technological paradigms at the intersection of music and artificial intelligence. He is a researcher at the Advanced Knowledge Center in Immersive Technologies (AKCIT-IMD/UFRN) and a former member of the Interdisciplinary Nucleus for Sound Studies (NICS) at UNICAMP. His work spans computational neuroscience, health technologies, and AI ethics, with a focus on designing multisensory experiences and interactive museum installations.

Alyson Souza, Universidade Federal do Rio Grande do Norte

Alyson Souza é professor associado e investigador no IMD/UFRN, especializado em tecnologias imersivas nas áreas das artes e da inovação. Desempenha as funções de coordenador do AKCIT-IMD/UFRN e dirige o Laboratório de Realidades Adaptativas da UFRN. Atualmente, lidera o projeto «Investigação de Tecnologias Imersivas para o Desenvolvimento de Novas Experiências nas Artes», uma iniciativa centrada na criação de paradigmas criativos pioneiros na Realidade Virtual e na Realidade Mista. Com um extenso portfólio na intersecção entre estética e tecnologia, Souza desenvolveu várias exposições imersivas de destaque, incluindo «MedusoZoa», «Peixes do Semiárido» e «Navegar Impreciso».

Stefane Orichuela, Universidade Federal do Rio Grande do Norte

Stefane Orichuela é estudante de mestrado em Engenharia de Software na UFRN e é licenciada em Tecnologias da Informação, com especialização em jogos digitais. É investigadora no AKCIT-IMD/UFRN, dedicando-se ao desenvolvimento de aplicações de Realidade Virtual para a música e a cultura. Anteriormente violoncelista na Orquestra Juvenil da Marinha do Brasil (2015–2018), dedica-se atualmente à investigação sobre a interação homem-computador, ambientes imersivos multiutilizador e a aplicação da RV em contextos educativos e culturais.

João Anisio da Nobrega, Universidade Federal do Rio Grande do Norte

João Anísio Marinho da Nóbrega é investigador, criador de jogos e mestrando no Programa de Pós-Graduação em Bioinformática (PPGbioinfo) da UFRN. Desempenha funções de chefe de equipa no AKCIT-IMD/UFRN, onde lidera o desenvolvimento de estruturas de interação espacial. A sua investigação explora a perceção e a incorporação na realidade virtual, com especialização técnica em pseudo-háptica, rastreamento com as mãos nuas e conceção de níveis utilizando as plataformas Godot e Unity. Em 2026, o seu trabalho foi reconhecido na IEEE VR em Daegu, na Coreia do Sul, onde foi nomeado para o prémio de melhor demonstração técnica.

Leonardo Pereira, Universidade Federal do Rio Grande do Norte

Leonardo M. Pereira é estudante de mestrado na UFRN e colaborador do AKCIT-IMD/UFRN, do Laboratório TEAM e do projeto 10 Dimensões. Licenciado em Artes/Música e com certificação como técnico de guitarra, desenvolve uma atividade dinâmica nas áreas da interpretação, composição e produção cultural, com obras apresentadas em todo o Brasil, Argentina, Colômbia e Espanha. A sua investigação e publicações centram-se na intersecção entre música e tecnologia, composição, interpretação e educação musical.

Jonatas Manzolli, Universidade Estadual de Campinas

Jônatas Manzolli é professor catedrático, compositor e investigador que trabalha na intersecção entre arte, ciência e tecnologia. É investigador sénior no NICS (UNICAMP) e colabora com o Departamento de Engenharia Informática da Universidade de Coimbra e com o INET-md (DeCa) da Universidade de Aveiro. O seu trabalho centra-se na criatividade computacional, na audição automática e na performance multimodal. Entre os seus projetos de destaque contam-se o «Ada: Intelligent Space» (Expo.02) e a «Multimodal Brain Orchestra». Bolseiro da Fundação Rockefeller e galardoado com o Prémio Zeferino Vaz, é o compositor residente de 2026 do projeto «SHORES» do programa «Europa Criativa».

Cleber Campos, Universidade Federal do Rio Grande do Norte

Cleber de Silveira Campos é professor catedrático na UFRN e investigador principal no AKCIT-IMD/UFRN, especializado em interpretação musical e mediação tecnológica para percussão. Galardoado com o Prémio de Tese da CAPES (2013), a sua investigação centra-se em modelos de recursividade na interpretação apoiada pela tecnologia. É coordenador do LAPER2ME (Laboratório de Percussão e Interpretação Mediada por Recursos Tecnológicos) na EMUFRN e lidera iniciativas internacionais, como o projeto I-Jazz, que analisa o impacto da inovação tecnológica no jazz contemporâneo e no jazz brasileiro.

Referências

BROCH, Vilbjørg. ES QC: Using mathematical quasicrystals to inform spatial audio. In: SPECULATIVE SOUND SYNTHESIS SYMPOSIUM, 2024, Graz. Proceedings [...]. Graz: Institute of Electronic Music and Acoustics (IEM), 2024.

CESPEDES-GUEVARA, Julian; EEROLA, Tuomas. Music Communicates Affects, Not Basic Emotions - A Constructionist Account of Attribution of Emotional Meanings to Music. Frontiers in psychology, Lausanne, v. 9, p. 215, 2018.

CHION, Michel. Audio-vision: sound on screen. New York: Columbia University Press, 2019.

DIXON, Steve. Digital Performance: A History of New Media in Theater, Dance, Performance Art, and Installation. Cambridge: MIT Press, 2015.

EMMERSON, Simon. Living electronic music. London: Routledge, 2017.

FIELDEN, Thomas. The Influence of the Pianoforte on Musical Progress. Proceedings of the Musical Association, London, v. 65, p. 91–107, jan. 1938.

FRAYLING, Christopher. Research in Art and Design. Royal College of Art Research Papers, London, v. 1, n. 1, p. 1–5, 1993.

GARITY, WM E.; HAWKINS, John NA. Fantasound. Journal of the Society of Motion Picture Engineers, New York, v. 37, n. 8, p. 127–146, 1941.

GRONOW, Pekka; SAUNIO, Ilpo. International history of the recording industry. London: A&C Black, 1999.

GVINIASHVILI, Mariam. Programme notes for FREE FLOW. In: PHONOS (UPF), Barcelona, 2022.

IVERSON, Jennifer. Invisible collaboration: The dawn and evolution of elektronische Musik. Music Theory Spectrum, Oxford, v. 39, n. 2, p. 200–222, 2017.

JUSLIN, Patrik N. Communicating emotion in music performance: A review and a theoretical framework. In: Music and emotion: Theory and research. Series in affective science. New York, NY, US: Oxford University Press, 2001. p. 309–337.

KAHN, Douglas. Noise, water, meat: a history of sound in the arts. Cambridge: MIT press, 1999.

LAKATOS, Mihály. Sights and sounds of big data: Ryoji Ikeda’s immersive installations. Acta Universitatis Sapientiae, Film and Media Studies, Cluj-Napoca, n. 18, p. 109–129, 2020.

LOMBARD, Matthew; DITTON, Theresa. At the Heart of It All: The Concept of Presence. Journal of Computer-Mediated Communication, Washington, DC, v. 3, n. 2, p. JCMC321, 1 set. 1997.

LE GROUX, Sylvain; MANZOLLI, Jonatas; VERSCHURE, Paul. Disembodied and Collaborative Musical Interaction in the Multimodal Brain Orchestra. In: CONFERENCE ON NEW INTERFACES FOR MUSICAL EXPRESSION (NIME), 2010, Sydney. Proceedings [...]. Sydney, Australia: NIME, 2010.

MANNING, Peter. Electronic and computer music. Oxford: Oxford University Press, 2013.

MANOVICH, Lev. The Language of New Media. Cambridge: MIT Press, 2002.

MURRAY, Janet H. Hamlet on the Holodeck: The Future of Narrative in Cyberspace. Cambridge, MA, USA: MIT Press, 1998.

OHGI, Hiromu et al. Transcending Boundaries: Unleashing Musical Expression through Immersive Sound Image and Reverberation Control System. In: AUDIO ENGINEERING SOCIETY CONVENTION, 155., 2023, New York. Proceedings [...]. New York: Audio Engineering Society, 2023.

ONDERDIJK, Kelsey E. et al. Concert experiences in virtual reality environments. Virtual Reality, London, v. 27, n. 3, p. 2383–2396, 2023.

PALMER, Caroline. Music Performance. Annual Review of Psychology, Palo Alto, v. 48, p. 115-138, 1997.

PFANZAGL-CARDONE, Edwin. DTS: X®. In: The art and science of 3D audio recording. Cham: Springer, 2023. p. 241–265.

RENNÓ-COSTA, César et al. Immersive Creativity: A Framework for Expressive and Creative Interaction in Virtual and Mixed Reality Inspired by Musical Thinking. Lausanne: Frontiers in Virtual Reality, 2026. p. 1-25.

RIDOUT, Sam. Freak out! At the acousmonium: François Bayle and the dynamics of the subject. French Cultural Studies, London, v. 36, n. 1, p. 79–94, 2025.

ROTHENBERG, David. Thousand-mile song: Whale music in a sea of sound. New York: Basic Books, 2008.

SALIMI, Mahsoo; PASQUIER, Philippe. Liminal Tones: Swarm Aesthetics and Materiality in Sound Art. In: TAN, Ying; SHI, Yuhui (orgs.). Cooperative Design, Visualization, and Engineering. Cham: Springer International Publishing, 2021. p. 182-191.

SCHAEFFER, Pierre. Étude aux chemins de fer. Cinq études de bruits, Studio d’Essai, Paris, v. 5, 1948.

SCHAEFFER, Pierre. Treatise on Musical Objects: An Essay across Disciplines. Berkeley: Univ of California Press, 2017.

SEASHORE, Carl E. Psychology of Music. New York, NY: McGraw-Hill, 1938.

SERGI, Gianluca. Knocking at the door of cinematic artifice: Dolby Atmos, challenges and opportunities. The New Soundtrack, Edinburgh, v. 3, n. 2, p. 107–121, 2013.

SLATER, Mel. Place illusion and plausibility can lead to realistic behaviour in immersive virtual environments. Philosophical Transactions of the Royal Society B: Biological Sciences, London, v. 364, n. 1535, p. 3549–3557, 12 dez. 2009.

STOROLLI, Wânia. The Forty Part Motet: A arquitetura sonora de Janet Cardiff. In: CONGRESSO DA ASSOCIAÇÃO NACIONAL DE PESQUISA E PÓS-GRADUAÇÃO EM MÚSICA (ANPPOM), 26., 2016, Belo Horizonte. Proceedings [...]. Belo Horizonte: ANPPOM, 2016.

TAYLOR, Benjamin. A history of the audience as a speaker array. In: INTERNATIONAL CONFERENCE ON NEW INTERFACES FOR MUSICAL EXPRESSION (NIME), 2017, Copenhagen. Proceedings [...]. Copenhagen: NIME, 2017.

THÉBERGE, Paul. Any sound you can imagine: Making music/consuming technology. Middletown: Wesleyan University Press, 1997.

THÉBERGE, Paul. The network studio: Historical and technological paths to a new ideal in music making. Social Studies of Science, London, v. 34, n. 5, p. 759–781, 2004.

THOMAS, James; HARDEN, Angela. Methods for the thematic synthesis of qualitative research in systematic reviews. BMC Medical Research Methodology, London, v. 8, n. 45, p. 1–10, 2008.

WANG, Ge. A history of programming and music. In: COLLINS, Nick; D'ESCRIVAN, Julio (ed.). The Cambridge companion to electronic music. 2. ed. Cambridge: Cambridge University Press, 2017. cap. 4. p. 55-71.

XAMBÓ, Anna; ROMA, Gerard. Performing audiences: Composition strategies for network music using mobile phones. In: INTERNATIONAL CONFERENCE ON NEW INTERFACES FOR MUSICAL EXPRESSION (NIME), 2020, Birmingham. Proceedings [...]. Birmingham: NIME, 2020.