La modélisation des interactions geste–son dans le métavers musical : contributions pour les industries culturelles et créatives // Modeling Gesture-Sound Interactions in the Musical Metaverse: Contributions to the Cultural and Creative Industries

Cette thèse explore l'émergence de nouvelles formes de création et de diffusion musicale à l'ère des environnements immersifs. À l'intersection des arts numériques, de la réalité mixte et des plateformes culturelles, elle vise à concevoir des instruments et des installations musicales collaboratives permettant de renouveler les expériences artistiques dans les industries culturelles et créatives.
Le projet repose sur le développement d'un modèle de conception des interactions geste–son intégrant des dimensions encore peu formalisées : spatialisation du son, interactions multi-utilisateurs, feedbacks sensoriels et modalités émergentes (voix, regard, hand tracking). Ce modèle permet d'explorer systématiquement de nouvelles formes d'instruments et de dispositifs scéniques immersifs.
Comme étude de cas, la recherche s'appuie sur WAM Jam Party, une plateforme musicale immersive accessible librement via le web, qui permet de s'affranchir des contraintes des applications natives (installation, comptes, dépendance à des écosystèmes propriétaires). Cette accessibilité favorise l'expérimentation à grande échelle, l'inclusion de publics variés, l'élargissement des modes d'accès à la création musicale immersive et l'émergence de nouvelles pratiques collaboratives.
Le projet s'inscrit dans une perspective de métavers musical, où musiciens et publics coexistent dans des espaces interactifs partagés. Il permettra d'expérimenter de nouvelles formes de performances, telles que des concerts immersifs, participatifs et distribués, ainsi que des dispositifs hybrides de création et de médiation.
Au-delà des contributions scientifiques, la thèse vise à proposer des outils et des modèles pour les acteurs des ICC, en accompagnant les mutations des métiers, des pratiques artistiques et des modes de production et de diffusion dans un contexte de transition numérique.
------------------------------------------------------------------------------------------------------------------------------------------------------------------------
------------------------------------------------------------------------------------------------------------------------------------------------------------------------

This thesis explores the emergence of new forms of musical creation and dissemination in the era of immersive environments. At the intersection of digital arts, mixed reality, and cultural platforms, it aims to design collaborative musical instruments and installations that can revitalize artistic experiences within the cultural and creative industries.
The project is based on the development of a design model for gesture-sound interactions that integrates dimensions that have yet to be fully formalized: sound spatialization, multi-user interactions, sensory feedback, and emerging modalities (voice, gaze, hand tracking). This model enables the systematic exploration of new forms of instruments and immersive stage devices.
As a case study, the research draws on WAM Jam Party, a freely accessible immersive music platform available via the web, which eliminates the constraints of native applications (installation, accounts, dependence on proprietary ecosystems). This accessibility fosters large-scale experimentation, the inclusion of diverse audiences, the expansion of access to immersive musical creation, and the emergence of new collaborative practices.
The project is part of a vision for a musical metaverse, where musicians and audiences coexist in shared interactive spaces. It will enable experimentation with new forms of performance, such as immersive, participatory, and distributed concerts, as well as hybrid approaches to creation and outreach. Beyond scientific contributions, the thesis aims to propose tools and models for stakeholders in the creative and cultural industries, supporting the evolution of professions, artistic practices, and modes of production and distribution in the context of the digital transition.
------------------------------------------------------------------------------------------------------------------------------------------------------------------------
------------------------------------------------------------------------------------------------------------------------------------------------------------------------

Début de la thèse : 01/10/2026

Contrat doctoral EDSTIC-DS4H

Université Côte d'Azur

84 STIC - Sciences et Technologies de l'Information et de la Communication

Le candidat doit être titulaire d'un master ou d'un diplôme équivalent au moment de l'embauche et posséder une expertise technique dans les technologies web et la réalité virtuelle, ainsi qu'une solide formation en informatique et en interaction homme-machine.
The candidate must hold a master's degree or equivalent at the time of hiring and possess technical expertise in web technologies and virtual reality, as well as a strong background in computer science and human-computer interaction.