La collaboration en réalité étendue (XR) est en train de disparaître... mais l'IA pourrait la sauver !

Dans cet épisode, Gabe Baker, fondateur de Frame, aborde l'état actuel des plateformes de collaboration en réalité étendue (XR) et la manière dont l'IA redéfinit le paysage. Gabe explique comment Frame évolue pour répondre aux besoins des utilisateurs et s'adapter aux évolutions rapides des technologies immersives.

Interview avec Gabe Baker

Qu'est-ce qui, selon vous, a conduit des plateformes comme Mozilla Hubs et Glue à fermer leurs portes ?

Gabe Baker : Dans le cas de Glue, je pense qu'ils se sont trop concentrés sur l'expérience VR, ce qui est problématique, car tout le monde n'utilise pas encore la réalité virtuelle. Ils n'ont pas suffisamment priorisé les versions desktop ou mobile, et trouver cet équilibre est difficile. Pour Mozilla Hubs, c'est plus compliqué à cerner. Ils ont fait beaucoup de choses correctement, notamment avec leur communauté open source, mais ils étaient pris entre deux cibles : les développeurs et les utilisateurs non techniques. Il est difficile de répondre équitablement aux besoins de ces deux groupes. Faire partie d'une grande organisation comme Mozilla a peut-être aussi joué un rôle : les petites équipes dans de grandes entreprises dépendent souvent des tendances et des priorités qui ne correspondent pas toujours à ce qu'elles construisent.

Quels défis avez-vous rencontrés lors de la création d'une plateforme de collaboration 3D comme Frame ?

Gabe Baker : Cela n’a pas été simple. Pendant la pandémie, il y a eu un véritable boom de la demande pour des outils de collaboration immersive, mais cet engouement s’est estompé depuis. Nous avons connu un certain succès avec Frame, mais j’ai toujours l’impression que nous devons en faire plus. La concurrence est féroce, et certaines plateformes comme Mozilla Hubs et Glue ont déjà fermé leurs portes. Cela m’a poussé à réfléchir longuement à la manière de se démarquer. Le plus grand défi a été de trouver un équilibre entre l’innovation et les besoins des utilisateurs tout en essayant de définir ce qui distingue réellement Frame des outils de visioconférence plus traditionnels.

Comment voyez-vous l'évolution de Frame pour répondre aux besoins des utilisateurs dans une industrie en pleine mutation ?

Gabe Baker : Je pense que l'essentiel est de se concentrer sur l'IA et sur la manière dont elle peut véritablement transformer notre façon de collaborer dans des espaces 3D. Nous explorons des idées comme des agents alimentés par l'IA capables d'assister aux réunions en générant du contenu pertinent en temps réel, voire de travailler de manière autonome en votre absence, par exemple en préparant les supports pour la prochaine réunion. Nous réfléchissons également à la manière dont l'IA peut dépasser les tâches simples pour aider les équipes de manière créative, comme organiser des idées et du contenu dans un espace 3D. Cependant, nous devons encore déterminer comment nous démarquer dans un marché déjà très concurrentiel.

Quels secteurs utilisent actuellement Frame le plus fréquemment ?

Gabe Baker : L'éducation est un secteur majeur pour nous – environ 50 % des utilisateurs de Frame sont des enseignants qui l'utilisent pour des cours en ligne ou des environnements hybrides. Les étudiants créent parfois leurs propres Frames pour présenter leurs travaux, les transformant ainsi en galeries virtuelles. L'autre moitié des utilisateurs est un mélange : 25 % utilisent Frame pour des événements en ligne comme des conférences académiques ou des réunions d'entreprise, et les 25 % restants sont des équipes distantes, généralement des petites entreprises, qui recherchent une alternative à Zoom pour leur collaboration quotidienne. Nous répondons à une grande variété de besoins, mais nous cherchons encore à déterminer où nous nous intégrons le mieux.

Que pensez-vous de la recréation d'anciens bureaux physiques en réalité virtuelle pour les entreprises ?

Gabe Baker : C’est compliqué. Pour les grandes entreprises, le changement est difficile, et recréer un espace de bureau familier en VR aide à rendre cette transition plus fluide. Il y a un confort dans la familiarité. Je comprends pourquoi les entreprises souhaitent que leurs bureaux réels soient reproduits dans le métavers : ces espaces sont souvent chargés d’une signification émotionnelle ou historique. Mais ce n’est pas parce que nous pouvons créer quelque chose de radicalement différent dans le métavers que nous devrions toujours le faire. Pour certaines entreprises, reproduire leur bureau aide à maintenir leur culture.

Quel pourcentage des utilisateurs de Frame utilisent régulièrement la réalité virtuelle par rapport à ceux utilisant desktop ou mobile ?

Gabe Baker : Seulement environ 2 à 3 % de nos utilisateurs utilisent régulièrement la VR. Nous avons toujours privilégié le desktop et le mobile par rapport à la VR, car beaucoup de nos clients ont besoin que cela fonctionne de manière fluide sur les téléphones et les ordinateurs en premier lieu. La VR est plus une fonctionnalité additionnelle pour nous, pas l'expérience centrale. C’est un "plus", mais pas essentiel pour la majorité de nos utilisateurs. Et bien que les expériences VR soient importantes, elles ne représentent pas la majorité de notre focus de développement.

Quelle a été votre expérience avec l'Apple Vision Pro et la prise en charge du WebXR ?

Gabe Baker : Apple a été un peu lent dans ce domaine. Leur prise en charge des standards web comme WebXR, WebGPU, et même WebGL a été insuffisante, ce qui a rendu les choses compliquées. Frame fonctionne sur le Vision Pro, mais c’est très limité comparé au Quest ou au desktop. Il n’y a pas de contrôleur, donc il faut utiliser ce geste maladroit de main à la Spider-Man pour se téléporter. Ce n’est pas l’expérience idéale, mais c’est un début. Nous n'étions même pas sûrs qu'Apple soutienne WebXR, donc c’est bien qu’ils le fassent, mais il reste encore beaucoup de chemin à parcourir.

Quelle a été l'idée derrière la création du "Quick Mode" pour les utilisateurs mobiles dans Frame ?

Gabe Baker : Quick Mode a été conçu avant tout pour l'accessibilité. Beaucoup de nos utilisateurs, notamment dans des secteurs comme l'immobilier, doivent pouvoir rejoindre des réunions en déplacement. Il n’est pas toujours possible de charger une expérience 3D complète sur un téléphone, surtout si vous êtes dans une voiture. Quick Mode leur permet de se connecter aux réunions et de participer par audio, sans avoir à interagir avec l'environnement 3D complet. C’est avant tout une exigence métier – les gens doivent pouvoir rejoindre ces réunions facilement, peu importe où ils se trouvent.

Quels outils créatifs sont disponibles dans Frame pour que les utilisateurs puissent créer leurs propres espaces ?

Gabe Baker : Frame offre aux utilisateurs une grande liberté créative. Ils peuvent importer des modèles 3D, créer des shaders personnalisés, ajouter des éléments interactifs, et même utiliser des systèmes de particules. Mais nous essayons aussi de simplifier les choses pour les utilisateurs non techniques. Les outils les plus populaires sont en fait les basiques : afficher des images, des PDFs, et diffuser des vidéos. Il est aussi possible de mettre en place de l'interactivité, comme faire apparaître ou disparaître des objets lorsqu'on clique dessus, mais nous cherchons à trouver un équilibre entre offrir un pouvoir créatif et garantir une interface facile à utiliser.

Qu'est-ce qui vous a convaincu que l'IA pourrait transformer la manière dont nous collaborons dans des espaces 3D ?

Gabe Baker : Au début, j'étais sceptique. J'ai tendance à être prudent face aux nouvelles technologies, mais l'IA m'a vraiment convaincu. Elle ouvre de nouvelles façons de créer des logiciels et révèle des capacités que nous n'aurions jamais cru possibles. Quand je pense à des outils comme Zoom et Google Meet, leur intégration de l'IA semble assez basique : résumés de réunions, actions à accomplir, ce genre de choses. Mais ce qui m'excite, c'est d'imaginer ce que l'IA pourrait faire en tant que participant actif dans un espace 3D. C'est là que réside le véritable potentiel.

Comment l'IA s'intègre-t-elle dans l'avenir de Frame, notamment pour les réunions d'affaires ?

Gabe Baker : L'IA jouera un rôle énorme dans la transformation des réunions sur Frame. Nous travaillons à l’ajout d'agents alimentés par l'IA qui pourront écouter les conversations et créer de manière proactive des éléments pertinents dans l'espace 3D, comme intégrer des articles de presse ou générer des modèles 3D en fonction de ce qui est discuté. Mais nous voulons aussi que ces agents IA fonctionnent de manière autonome. Ils continueront à travailler même quand vous ne serez pas dans Frame, de sorte qu'à votre retour, vous trouverez des ressources préparées pour votre prochaine réunion. L'objectif est de rendre les réunions plus productives et efficaces.

Comment équilibrer la nature imprévisible de l'IA avec la productivité dans Frame ?

Gabe Baker : C’est la partie délicate. L’IA peut être imprévisible – elle peut générer des résultats étranges ou inattendus. Mais je pense qu’il y a quelque chose de humain là-dedans. Nous ne sommes pas parfaits non plus, et nos conversations sont souvent imprévisibles. Au lieu d’essayer d’éliminer ces "hallucinations", je suis intéressé par l’idée de les embrasser, surtout dans des contextes créatifs. Nous explorons aussi une expérience à la Sims où les agents IA ont des personnalités et des objectifs, et leur comportement évolue au fil du temps. C’est une direction complètement différente de celle des réunions axées sur la productivité, mais tout aussi fascinante.

À quoi pouvons-nous nous attendre de Frame dans un avenir proche ?

Gabe Baker : Vous pouvez vous attendre à plus d'expérimentations à l'intersection de l'IA et de la collaboration 3D. Nous nous concentrons sur la facilitation de la collaboration en temps réel entre les gens et l'IA. Nous voulons que Frame devienne un endroit où les agents IA et les humains peuvent travailler ensemble de manière fluide, ce qui pourrait signifier différentes choses en fonction du contexte, que ce soit une réunion ou un cas d'utilisation plus créatif. Nous travaillons également sur un nouveau produit alimenté par l'IA qui mélange productivité et créativité, et nous sommes impatients de voir comment les utilisateurs interagiront avec ces outils.

Depuis notre conversation, l'équipe de Frame a ajouté plusieurs fonctionnalités IA au produit, découvrez les ici.

Retrouvez l'interview complète en vidéo.

Pour s'abonner à la newsletter c'est par ici