Nous avons aujourd’hui décidé de nous intéresser au son dans les expériences de XR. Même si depuis des années ce sens est mieux pris en compte, il reste parfois mis au second plan dans les expériences immersives Nous avons donc demandé à Pierre-Marie Blind, directeur du studio Bande sonore, de nous éclairer sur le sujet. D’emblée, Pierre-Marie a tenu à préciser qu’il se définit comme un « audio designer » plutôt qu’un « sound designer ». Cette distinction sémantique est cruciale pour lui, car elle lui permet de s’éloigner de la production basique de bruitages pour embrasser l’expérience dans sa globalité.
Des chercheurs de l'Université de Pennsylvanie ont développé SmartDJ, un outil d'édition audio basé sur l'intelligence artificielle qui permet de modifier des environnements sonores immersifs à partir d'instructions simples en langage naturel. Il fonctionne en stéréo, préservant ainsi les indices spatiaux essentiels à une expérience immersive. L'outil est également interprétable : chaque étape de modification est visible et modifiable par l'utilisateur. Pour fonctionner, SmartDJ combine un modèle de langage pour comprendre les instructions et un modèle de diffusion pour appliquer les changements audio. Ses applications potentielles incluent la réalité virtuelle, les jeux vidéo ou la conception sonore.
Kivicube vous propose de créer une expérience de RA en 3 minutes en utilisant leur plateforme. Le système est basé sur du WebAR pour gagner en souplesse d'utilisation et permettre aux débutants de concevoir facilement leur projet. Les créateurs peuvent importer des modèles 3D, ajuster l'éclairage, ajouter des animations et des interactions pour rendre leurs filtres plus attrayants et partageables.
Google a présenté la version fonctionnelle du "Project Genie", une application utilisant les modèles Gemini, Genie 3 et Nano Banana Pro, permettant de créer des environnements 3D dynamiques et interactifs. Genie 3 génère des chemins en temps réel et simule la physique pour des mondes variés, allant de la robotique à l'exploration historique. Elle offre trois fonctionnalités principales : la création de mondes via des prompts et des images, l'exploration en temps réel avec ajustement dynamique de la caméra, et le remixage de mondes via des vidéos téléchargeables. Cependant, Google souligne que Genie est un prototype expérimental avec des limites, comme des mondes parfois irréalistes ou des latences de contrôle.
Snap a créé une filiale dédiée à ses lunettes de réalité augmentée, nommée Specs Inc. Cette séparation vise à accélérer l'innovation, attirer des investisseurs et concurrencer des acteurs comme Meta. Snap espère ainsi structurer un écosystème plus attractif pour les partenaires industriels et financiers. Une nouvelle génération de lunettes, plus légères et puissantes, est prévue pour 2026. Specs Inc. recrute également plus de 100 employés à l'international, marquant une volonté claire de Snap de se positionner sur un marché concurrentiel.
Gracia AI, spécialisée dans le Gaussian Splatting (3D et 4D) a annoncé une levée de fonds de 1,7 million de dollars. L'objectif est d'accélérer le développement de son infrastructure complète pour la production et le déploiement de vidéos volumétriques. La plateforme supporte plusieurs casques VR et offre des plugins pour Unity et Unreal Engine. Actuellement, la technologie de Gracia est testée dans des pipelines VFX et utilisée pour des expériences XR avec l'objectif d'économiser des coûts de production.
A Paris, dans le cadre de l'exposition "Louis Vuitton Art Deco", Snapchat propose des expériences en réalité augmentée pour enrichir la visite. Accessibles via l'audioguide ou des QR codes, ces expériences permettent de découvrir des éléments invisibles habituellement. Quatre moments clés sont proposés : l'animation de portraits de la famille Vuitton, une maquette 3D de l'Exposition de 1925, la revitalisation d'un porte-habits historique, et la transformation des murs en vitrines immersives inspirées des années 1920.
L'entreprise chinoise Tencent a lancé mondialement son moteur de création 3D Hunyuan, une plateforme alimentée par l'IA qui simplifie la génération d'actifs 3D pour les créateurs et les entreprises. Cette technologie permet de créer des modèles 3D à partir de descriptions textuelles, d'images ou de croquis, réduisant considérablement le temps et le côut de production. L'API du modèle 3D Hunyuan est également disponible via Tencent Cloud, permettant aux entreprises d'intégrer ces capacités de génération 3D dans leurs flux de travail. Depuis sa sortie en novembre 2024, le modèle Hunyuan 3D a été téléchargé plus de 3 millions de fois sur la plateforme Hugging Face.
Trace, une entreprise développée par d'anciens employés de Magic Leap, ouvre sa plateforme de réalité augmentée nocode, permettant à quiconque de créer, partager et développer du contenu immersif sans compétences en codage.
Trace propose trois mois gratuits de son plan premium pour les créateurs migrants d'Adobe Aero et Meta Spark AR, deux plateformes AR récemment fermées. Trace est disponible gratuitement sur iPhone et iPad, avec un abonnement premium à partir de 20 dollars par mois.
8th Wall lance son application desktop en version bêta publique pour macOS, avec une version Windows à venir. Cette application permet de créer des projets directement depuis son ordinateur, tout en restant connecté aux fonctionnalités de 8th Wall. Elle offre une plus grande flexibilité en intégrant les outils de développement préférés de l'utilisateur, comme VS Code, et facilite la gestion des fichiers locaux. L'application permet également de synchroniser les projets avec le cloud, permettant ainsi de travailler en équipe et de basculer facilement entre le développement local et web.
8th Wall a mis à jour son moteur de physique avec la sortie de Studio Runtime v2.0.0. Cette mise à jour apporte des performances plus rapides et plus fiables, ainsi que de nouveaux outils comme les "Kinematic Bodies" (KB) et une détection de collision à haute précision. Les KB permettent de créer des objets qui suivent un chemin précis tout en interagissant avec le monde physique.
Microsoft annonce l'arrivée des rencontres immersives dans Teams. Il sera possible d'y assister avec ou sans casque et de personnaliser les lieux virtuels.
PortAventura ajoute une nouvelle attraction en réalité augmentée à son catalogue. Grâce à l'utilisation de l'IA pour la création de contenu, le temps de production a été réduit de 30% et c'est une équipe interne du parc qui a pris en charge la création.
The nextReality.festival is a two-day event that celebrates the most exciting and innovative developments in the field of immersive technologies and media. With a mixture of conference, exhibition, award ceremony and networking events, the festival offers a unique platform for professionals, creatives, interested parties and enthusiasts from the XR world.
Dans notre série des d’interviews sur le concept du Metaverse, nous sommes heureux de vous proposer aujourd’hui avec Nicolas Perrier, spécialiste de l’innovation en technologies immersives. Nous explorons les croisements profonds entre Metaverse, intelligence artificielle et enjeux géopolitiques contemporains.
XRmust nous présente une réflexion particulièrement intéressante sur la dépendance de la XR européen aux outils et aux services des "Big Tech".
SI l'IA est une technologie particulièrement intéressante pour les expériences de RA, il convient de ne pas penser que les 2 sont inséparables. Je vous propose une explication en 3 points sur la place optimale de l'IA dans la RA
Meta annonce la fermeture de son outil de création Spark pour janvier 2025. Les créateurs ont 6 mois pour trouver une autre solution.
Niantic annonce le lancement de son outil de développement "low code", le Niantic Studio, durant AWE 2024. L'outils est basé sur une interface web pour faciliter le travail de production
Snapchat ajoute des fonctionnalités à ses outils de créations pour faciliter le travail des marques et réduire les temps de développement. L'entreprise annonce aussi développer son partenariat avec Live Nation