Son Immersif basé sur les Head Related Transfer Functions

Description

La recherche aura pour but la création d’un système de génération d’HRTFs (Head Related Transfer Functions) personnalisées le plus simple, précis, fidèle et efficace possible. Les innovations visées par la thèse aideront à améliorer la création automatique (sans retouches manuelles) de dataset de haute qualité, les modèles utilisant les données photogrammétriques pour la création de modèles 3D d’oreille précis, la détection des données anthropométriques à partir de ces modèles 3D. Avec tous ces éléments, cette thèse tentera plus globalement de clarifier la compréhension des relations entre les HRTFs et la morphologie d’un individu donné.

La création d’HRTFs personnalisée est une opération qui permet l’adaptation à la morphologie de n’importe quel auditeur du son d’une scène virtuelle, améliorant ainsi le sentiment d’immersion. La modélisation 3D automatique de l’oreille sur base de photographies (ou photogrammétrie [1]) et la détection automatique de données anthropométriques [2] ou encore le morphing d’un maillage 3D d’oreille haute résolution avec des données anthropomorphiques [3] font parties des méthodes utilisées pour créer ces sets de fonctions personnalisés. D’autre part, en ce qui concerne les formats des datasets HRTFs, bien que la norme SOFA [4] ait été définie en 2015, celle-ci n’intègre pas les données anthropomorphiques dont la structure est alors laissée libre à chacun.

[1] Dellepiane M, Pietroni N, Tsingos N, Asselot M, Scopigno R. Reconstructing head models from photographs for individualized 3d-audio processing. In: Computer Graphics Forum. Vol. 27. Hoboken, New Jersey, United States: Wiley Online Library; 2008. pp. 1779-1727. DOI:10’1111/ j.7467 -8659.20 0 8. 01316.x
[2] D. Fantini, F. Avanzini, S. Ntalampiras and G. Presti, « HRTF Individualization Based on Anthropometric Measurements Extracted from 3D Head Meshes, » 2021 Immersive and 3D Audio: from Architecture to Automotive (I3DA), Bologna, Italy, 2021, pp. 1-10, doi: 10.1109/I3DA48870.2021.9610904.
[3] K. Pollack and P. Majdak, « Evaluation of a parametric pinna model for the calculation of head-related transfer functions, » 2021 Immersive and 3D Audio: from Architecture to Automotive (I3DA), Bologna, Italy, 2021, pp. 1-5, doi: 10.1109/I3DA48870.2021.9610885.
[4] P. Majdak, Y. Iwaya, T. Carpentier, R. Nicol, M. Parmentier, A. Roginska, Y. Suzuki, K. Watanabe, H. Wierstorf, H. Ziegelwanger, and M. Noisternig, « Spatially Oriented Format for Acoustics: A Data Exchange Format Representing Head-Related Transfer Functions, » Paper 8880, (2013 May.).