Nous avons aujourd’hui décidé de nous intéresser au son dans les expériences de XR. Même si depuis des années ce sens est mieux pris en compte, il reste parfois mis au second plan dans les expériences immersives Nous avons donc demandé à Pierre-Marie Blind, directeur du studio Bande sonore, de nous éclairer sur le sujet. D’emblée, Pierre-Marie a tenu à préciser qu’il se définit comme un « audio designer » plutôt qu’un « sound designer ». Cette distinction sémantique est cruciale pour lui, car elle lui permet de s’éloigner de la production basique de bruitages pour embrasser l’expérience dans sa globalité.
Des chercheurs de l'Université de Pennsylvanie ont développé SmartDJ, un outil d'édition audio basé sur l'intelligence artificielle qui permet de modifier des environnements sonores immersifs à partir d'instructions simples en langage naturel. Il fonctionne en stéréo, préservant ainsi les indices spatiaux essentiels à une expérience immersive. L'outil est également interprétable : chaque étape de modification est visible et modifiable par l'utilisateur. Pour fonctionner, SmartDJ combine un modèle de langage pour comprendre les instructions et un modèle de diffusion pour appliquer les changements audio. Ses applications potentielles incluent la réalité virtuelle, les jeux vidéo ou la conception sonore.
L’engouement pour les lunettes connectées (sans écran) semble devenir un peu fou ces derniers mois. La présentation des Ray-Ban Meta en 2023 et, depuis, la confirmation de leur succès par EssilorLuxottica a enflammé les constructeurs qui veulent tous s’engouffrer dans cette voie. On peut évidemment se poser la question de la taille réelle du marché, mais je vous propose de nous concentrer dans cet article sur un autre point, probablement plus intéressant pour les créateurs de contenus en RA : allons-nous suivre une résurrection de la réalité augmentée sonore ?
Un rapprochement intéressant entre Niantic et Sony pour améliorer l'utilisation du son dans les expériences de réalité augmentée géolocalisées de l'éditeur
Les lunettes de BOSE propose une expérience unique de réalité augmentée sonore qui met en lumière les possibilités ludique de ce sens
Des nouvelles des Frames de Bose. Elles ne font pas encore de la réalité augmentée mais au moins le son est bon !
Doppler Labs propose un dispositif pour modifier les sons perçus