Microsoft dépose un nouveau brevet pour le son généré par l’IA dans les jeux et les films

Microsoft dépose un nouveau brevet pour le son généré par l’IA dans les jeux et les films

Microsoft a déposé un nouveau brevet pour l’utilisation de musique/bandes sonores/audio générées par l’IAdans un large éventail de médias, y compris les films, les jeux vidéo, les enregistrements en direct et les domaines connexes. Le brevet est intitulé « MODÈLES D’INTELLIGENCE ARTIFICIELLE POUR LA CRÉATION DE MATÉRIAUX AUDIO » et a été publié le 17 novembre 2022. MICROSOFT TECHNOLOGY LICENSING , LLC est le déposant du brevet.

La description du brevet explique comment un son en temps réel peut être généré avec un système d’intelligence artificielle construit avec de grands ensembles de données qui comprendront des techniques d’apprentissage automatique utilisant des signaux visuels, audio et textuels. Vous pouvez lire la description exacte du brevet ci-dessous.

Un procédé d’apprentissage d’un ou plusieurs modèles d’IA pour générer des partitions audio accompagnant des ensembles de données visuelles comprend la réception de données d’apprentissage contenant une pluralité d’ensembles de données audiovisuelles et l’analyse de chacun des multiples ensembles de données audiovisuelles pour extraire une pluralité de caractéristiques visuelles, de caractéristiques textuelles et de caractéristiques audio. Le procédé comprend également la mise en correspondance de multiples caractéristiques visuelles et textuelles avec de multiples caractéristiques audio par l’intermédiaire d’un réseau d’apprentissage automatique. Sur la base des corrélations entre les caractéristiques visuelles, textuelles et audio, un ou plusieurs modèles d’IA sont formés pour produire une ou plusieurs partitions audio pour accompagner un ensemble de données donné.

Selon le brevet, cette nouvelle technologie aidera le système à générer du son en temps réel en fonction de la situation, ou, plus simplement, à générer un son dynamique/adaptatif . Fait intéressant, cette technologie séparera l’expérience de chaque personne en fonction de son choix et de sa situation dans un jeu vidéo, si l’on considère les jeux vidéo comme un exemple de mise en œuvre de cette technologie.

Microsoft HoloLens en action | Image : Armée américaine

La nouvelle IA de Microsoft pour le son pourrait aller bien au-delà de l’utilisation habituelle de la musique dynamique/adaptative dans les jeux. Les actions des joueurs peuvent être évaluées dynamiquement en temps réel avec des signaux audio et de la musique appropriés. En conséquence, l’expérience sonore sera différente d’une personne à l’autre.

Par exemple, nous utilisons des musiques de fond et du son préenregistrés dans des jeux vidéo et des films qui ont été enregistrés selon une situation prédéterminée qu’un utilisateur rencontrera dans un jeu ou un film particulier. Cependant, les jeux vidéo utilisent davantage la technologie de l’IA que les films ; Dans les jeux vidéo, de nombreux domaines implémentent déjà l’IA, qu’il s’agisse de l’interaction du joueur avec les PNJ ou du niveau principal de son dynamique basé sur les mouvements du joueur.

D’autre part, les films sont plus rigides que les jeux vidéo car chaque aspect du film est prédéterminé et enregistré, et rien ne change en temps réel pour les téléspectateurs. Ainsi, comme décrit dans le brevet, cette nouvelle technologie pourrait être révolutionnaire dans le domaine des médias. Cela va tout changer et les joueurs ou téléspectateurs se sentiront plus impliqués et immergés que jamais dans les médias qu’ils consomment.

Ce n’est pas non plus si farfelu si on y pense de manière réaliste, car la technologie de l’IA a beaucoup évolué ces dernières années, passant de la simple utilisation de l’IA pour des publicités ciblées à la création de photos et de vidéos ultra-réalistes avec une seule ligne de texte ; La technologie a parcouru un long chemin et sera tôt ou tard introduite dans tous les domaines de l’industrie des médias pour automatiser de longs processus.

Il sera intéressant de voir quelque chose comme des bandes sonores créées par l’intelligence artificielle en temps réel. Alors, que pensez-vous de cela? Avez-vous hâte de vivre quelque chose comme ça? Faites-nous savoir dans la section commentaires ci-dessous.

Laisser un commentaire

Votre adresse e-mail ne sera pas publiée. Les champs obligatoires sont indiqués avec *