Grant: Alliance Grants
Université de Sherbrooke
$26,667.00
Auralisation : validité, références et outils pour Audiokinetic et Wwise
EF 2023-24
Résumé
Le réalisme et l'immersion occupent une place de plus en plus importante dans les jeux vidéo ou dans les applications interactives. Pour le volet sonore, ceci se nomme auralisation : l'auralisation vise à rendre audible des phénomènes acoustiques décrits par des modèles théoriques issus de la science de l'acoustique. Pour les applications de type jeu ou interactives, cet aspect sonore va au delà de la séduction esthétique et touche en fait les besoins de localisation sonore, c'est-à-dire de repérer la provenance des sons dans l'espace. Ces informations sonores sont cruciales pour localiser un interlocuteur, pour saisir la dimension de la pièce occupée, repérer la provenance d'un risque ou d'un danger, localiser une alarme, etc. Dans le cas du jeu vidéo, pour le joueur, les sources sonores doivent être placées aux bons endroits et l'acoustique des lieux doit correctement influencer ces mêmes sources pour favoriser la navigation et l'efficacité du protagoniste dans l'espace virtuel. Au-delà du cas du jeu vidéo, ce réalisme peut aussi aider toute application interactive de simulation acoustique. Ce projet de recherche s'intéresse aux modèles de réflexion, diffraction et réverbération par l'environnement virtuel, introduits dans les moteurs de sons des jeux vidéo. Le défi de recherche actuel est de trouver le bon équilibre entre l'exactitude physique des modèles utilisés, leur réalisme d'un point de vue perceptif et leur mise en oeuvre logicielle dans un contexte de rendu sonore en temps réel. En termes de résultats et de retombées, ce projet permettra à Audiokinetic de maintenir un rôle de leader dans le jeu vidéo, mais aussi d'ouvrir d'autres portes en termes d'applications industrielles dans lesquelles la validité physique des environnements sonores est importante, voire un requis fondamental. Realism and immersion play an increasingly important role in video games and interactive applications. For the sound component, this is called auralization: auralization aims to make audible acoustic phenomena described by theoretical models from the science of acoustics. For game-type or interactive applications, this sound aspect goes beyond aesthetic seduction and in fact touches on the need for sound localization, i.e. to locate the origin of sounds in space. This sound information is crucial for locating an interlocutor, for grasping the dimension of the occupied room, locating the origin of a risk or a danger, locating an alarm, etc. In the case of video games, for the player, the sound sources must be placed in the right places and the acoustics of the premises must correctly influence these same sources to promote navigation and the protagonist's efficiency in the virtual space. Beyond the case of video games, this realism can also help any interactive acoustic simulation application. This research project focuses on models of reflection, diffraction and reverberation by the virtual environment, introduced in the sound engines of video games. The current research challenge is to find the right balance between the physical accuracy of the models used, their realism from a perceptual point of view and their software implementation in a context of real-time sound rendering. In terms of results and spin-offs, this project will enable Audiokinetic to maintain a leading role in video games, but also to open other doors in terms of industrial applications in which the physical validity of sound environments is important, even a fundamental requirement.
Programme
Alliance Grants
Bénéficiaire
Emplacement
Quebec, Canada
Type de bénéficiaire
Academia
Type
Grant
Source
NSERC's Awards Data
Tel que publié
Application id
561000-2020
Name nom
Berry, Alain A
Department département
Génie mécanique
Organization id
68
Institution établissement
Université de Sherbrooke
Province en
Québec
Province fr
Québec
Country en
CANADA
Country fr
CANADA
Fiscal year exercice financier
2023
Competition year année de concours
2020
Award amount
26667
Program id
ALLRP
Program name en
Alliance Grants
Program name fr
Subventions Alliance
Group en
RESEARCH PARTNERSHIPS
Group fr
PARTENARIATS DE RECHERCHE
Committee code
96
Committee name en
RPP Internal Decision Cttee
Committee name fr
Cté de décision interne - PPR
Area of application code
801
Area of application group en
Information and communication services
Area of application group fr
Services d'information et de télécommunications
Area of application en
Computer software
Area of application fr
Logiciel
Research subject code
2716
Research subject group en
Information technology
Research subject group fr
Virtual reality and related simulations
Research subject en
Technologie de l'information
Research subject fr
Réalité virtuelle et simulations connexes
Application title
Auralisation : validité, références et outils pour Audiokinetic et Wwise
Keyword
Auralisation; Diffraction du son; Immersion sonore; Mesures physiques; Réalité virtuelle; Réflexion du son; Réverbération; Simulations éléments finis; Tests d'écoute
Application summary
Le réalisme et l'immersion occupent une place de plus en plus importante dans les jeux vidéo ou dans les applications interactives. Pour le volet sonore, ceci se nomme auralisation : l'auralisation vise à rendre audible des phénomènes acoustiques décrits par des modèles théoriques issus de la science de l'acoustique. Pour les applications de type jeu ou interactives, cet aspect sonore va au delà de la séduction esthétique et touche en fait les besoins de localisation sonore, c'est-à-dire de repérer la provenance des sons dans l'espace. Ces informations sonores sont cruciales pour localiser un interlocuteur, pour saisir la dimension de la pièce occupée, repérer la provenance d'un risque ou d'un danger, localiser une alarme, etc. Dans le cas du jeu vidéo, pour le joueur, les sources sonores doivent être placées aux bons endroits et l'acoustique des lieux doit correctement influencer ces mêmes sources pour favoriser la navigation et l'efficacité du protagoniste dans l'espace virtuel. Au-delà du cas du jeu vidéo, ce réalisme peut aussi aider toute application interactive de simulation acoustique. Ce projet de recherche s'intéresse aux modèles de réflexion, diffraction et réverbération par l'environnement virtuel, introduits dans les moteurs de sons des jeux vidéo. Le défi de recherche actuel est de trouver le bon équilibre entre l'exactitude physique des modèles utilisés, leur réalisme d'un point de vue perceptif et leur mise en oeuvre logicielle dans un contexte de rendu sonore en temps réel. En termes de résultats et de retombées, ce projet permettra à Audiokinetic de maintenir un rôle de leader dans le jeu vidéo, mais aussi d'ouvrir d'autres portes en termes d'applications industrielles dans lesquelles la validité physique des environnements sonores est importante, voire un requis fondamental. Realism and immersion play an increasingly important role in video games and interactive applications. For the sound component, this is called auralization: auralization aims to make audible acoustic phenomena described by theoretical models from the science of acoustics. For game-type or interactive applications, this sound aspect goes beyond aesthetic seduction and in fact touches on the need for sound localization, i.e. to locate the origin of sounds in space. This sound information is crucial for locating an interlocutor, for grasping the dimension of the occupied room, locating the origin of a risk or a danger, locating an alarm, etc. In the case of video games, for the player, the sound sources must be placed in the right places and the acoustics of the premises must correctly influence these same sources to promote navigation and the protagonist's efficiency in the virtual space. Beyond the case of video games, this realism can also help any interactive acoustic simulation application. This research project focuses on models of reflection, diffraction and reverberation by the virtual environment, introduced in the sound engines of video games. The current research challenge is to find the right balance between the physical accuracy of the models used, their realism from a perceptual point of view and their software implementation in a context of real-time sound rendering. In terms of results and spin-offs, this project will enable Audiokinetic to maintain a leading role in video games, but also to open other doors in terms of industrial applications in which the physical validity of sound environments is important, even a fundamental requirement.