Le jeu est depuis longtemps un foyer d’innovation en IA. Désormais, la musique en fait partie. L’un des plus grands développeurs au monde, Activision Blizzard, connu pour des jeux tels que Call of Duty, Overwatch et World of Warcraft, a récemment publié un brevet qui détaille un système qui génère de la musique unique pour chaque joueur en utilisant l’intelligence artificielle et des algorithmes d’apprentissage automatique.
Ce système a le potentiel non seulement de changer la façon dont les compositeurs abordent la musique dans les jeux vidéo, mais aussi de redéfinir l’immersion dans les jeux vidéo en créant une expérience auditive unique pour chaque joueur.
1. Comment ce système est-il censé fonctionner ?
Dans les documents de brevet, le système est décrit comme étant capable de générer et de moduler dynamiquement de la musique en fonction d’événements de jeu déclenché par le joueur. Il y a beaucoup d’informations telles que le rythme, les interactions avec des personnages non joueurs, les actions environnementales, l’achèvement de la quête, etc. Selon le brevet, l’algorithme d’apprentissage automatique est formé sur tous ces ensembles de données qui sont ensuite enregistrés pour des itérations ultérieures. On pourrait imaginer qu’une action héroïque pourrait produire une musique héroïque, ou que le choix d’un joueur dans une quête pourrait produire une musique basée sur son alignement moral. Selon les règles prédéfinies du jeu, le tempo, la progression et la durée seront affectés.
L’utilisation de l’IA dans la musique de jeu et la conception sonore peut ouvrir une multitude de nouvelles possibilités :
Bandes sonores dynamiques : la musique générée par l’IA peut s’adapter en temps réel aux actions du joueur, créant une bande sonore unique et en constante évolution qui reflète le gameplay. Cela peut se traduire par une expérience plus immersive et personnalisée, car la musique s’adapte de manière transparente au récit, à l’environnement et aux choix des joueurs du jeu.
Musique générée de manière procédurale : la musique générée de manière procédurale peut ajouter de la variété aux bandes sonores des jeux en produisant un flux infini de pistes uniques basées sur un ensemble de règles ou de paramètres prédéfinis. Cela peut être particulièrement utile dans les jeux en monde ouvert, où une musique diversifiée et en constante évolution peut aider à maintenir l’engagement des joueurs.
Musique axée sur les émotions : l’IA peut analyser le comportement, les émotions ou les données biométriques d’un joueur dans le jeu (telles que la fréquence cardiaque) pour générer une musique qui évoque des réponses émotionnelles spécifiques. Cela peut créer une expérience plus résonnante émotionnellement et améliorer la narration globale.
Conception et effets sonores : l’IA peut également être utilisée pour générer et manipuler des effets sonores en temps réel, créant ainsi des expériences audios plus réalistes et immersives. Cela peut inclure des systèmes audios procéduraux qui génèrent des sons environnementaux basés sur des paramètres de jeu ou des voix générées par l’IA pour les personnages non joueurs (PNJ).
2. Quels sont les jeux qui ont commencé à expérimenter ces technologies ?
No Man’s Sky : Ce jeu d’exploration en monde ouvert utilise la génération procédurale pour créer son vaste univers, y compris la bande son. Le musicien Paul Weir et son groupe 65daysofstatic ont collaboré avec Hello Games pour développer un système de musique adaptative, qui crée une bande-son dynamique et évolutive basée sur les actions et l’environnement du joueur.
The Elder Scrolls V : Skyrim : Bien qu’il ne soit pas entièrement généré par l’IA, le système musical de Skyrim utilise un niveau d’adaptation dynamique. Le compositeur Jeremy Soule a créé divers thèmes et motifs que le moteur du jeu peut mélanger et assortir en fonction de l’emplacement, des actions et de l’heure du jeu du joueur.
Endel : Même s’il ne s’agit pas d’un jeu en soi, Endel est une application musicale basée sur l’IA qui génère des paysages sonores personnalisés en fonction de l’humeur, de l’activité et de l’environnement de l’utilisateur. Cela démontre le potentiel de la musique adaptative générée par l’IA qui pourrait être utilisée dans les jeux
3. Conclusion !
L’intelligence artificielle a eu un impact significatif sur l’univers des jeux vidéo en modifiant la façon dont la musique est produite, intégrée et expérimentée. Les développeurs peuvent dépasser les limites traditionnelles de la composition musicale grâce à l’IA, offrant aux joueurs des expériences sonores plus immersives, adaptatives et personnalisées que jamais.
L’intelligence artificielle permet donc de créer des musiques en temps réel en fonction des actions et des émotions des joueurs, des thèmes uniques et en créant des genres musicaux inédits. De plus, elle permet une collaboration inhabituelle entre les algorithmes et les compositeurs humains, créant des compositions captivantes et originales qui enrichissent la narration et l’ambiance des jeux. Aussi, la musique permet aux joueurs de vivre des expériences uniques grâce à des bandes sonores qui reflètent leurs préférences et leurs choix avec des ambiances sonores évolutives et réactives qui s’harmonisent harmonieusement avec l’action du jeu, elle contribue à renforcer l’engagement et l’immersion.
L’intelligence artificielle étend ainsi la créativité des jeux vidéo en combinant la capacité de la machine learning avec la créativité humaine pour offrir des expériences musicales riches, dynamiques et inoubliables. Il est fascinant d’imaginer comment l’IA continuera à façonner le paysage sonore des jeux vidéo, ouvrant la voie à de nouvelles possibilités d’expression musicale et d’émotion immersive pour les joueurs du monde entier.
Si ce domaine vous intéresse, je vous laisse avec ce tuto sur comment composer sa propre musique à l’aide de l’intelligence artificielle pour des jeux vidéos !
Oriane.