Activités de recherche

Thèmes de recherche

Notre personnel (45 personnes) effectue des recherches sur l’analyse, la synthèse, la reconnaissance et la cartographie de signaux tels que la parole, la musique, l’audio, les images, les vidéos, le regard, le visage, le corps et le langage, en utilisant l’intelligence artificielle. Nous utilisons également cette expertise pour construire des interfaces homme-machine intelligentes pour des applications créatives et biomédicales. Notre objectif est de mener une recherche compétitive au niveau international et de transférer ses résultats à la société.

Audio et Musique

Experts

Pr T. Dutoit, Pr S.Dupont

Défis de recherche
Integrating slow motion in tennis
  • Son au ralenti dans le sport
  • Récupération d’informations musicales/audio
  • Localisation sonore
Thèses de doctorat
  • Dr Alexis Moinet
  • Dr Jerome Urban
  • Dr Christian Frisson
  • Dr Mathilde Brousmiche
Projets
  • RW/PPP/SLOWDIO
  • RW/GreenTic/SonixTRIP

 

Experts

Prof T Dutoit, Pr S. Dupont, Dr L. Reboursière

Hexaphonic Godin guitar
Research challenges
  • Conception d’un nouvel instrument d’expression musicale
  • Analyse des sons de guitare hexaphoniques (pitch, mute, hammer on, pull off, harmoniques)
  • guitare augmentée
PhD Theses
  • Dr Nicolas D’Alessandro
  • Dr Loic Reboursiere
Projets
  • FSO EGC, et POC/IsGED

 

 

 


 

Visage et regard


Experts:

Pr B. Gosselin, Pr T. Dutoit, Dr M. Mancas, Dr V. Vandenbulcke

Research challenges
Recovery from occlusion in re-identification
  • Âge, sexe, origine ethnique, identité
  • Expressions / Émotions
  • Orientation du visage et des yeux
  • Repères faciaux
  • Ré-identification après occlusions
  • informatique de pointe
  • Détection profonde rapide et basée sur l’élagage detection
PhD Theses
  • Francois Rocca
  • Ratha Siv
  • Nathan Hubens
Projects
  • W/Beware/ReidPazo
  • RW/Win2Wal/MobFaceNet
  • RW/WalInov/PARKAR
  • RW/Win2Wal/Ability

Experts:
Heatmaps showing objects which draw most attention from viewers

Pr B. Gosselin, Dr M. Mancas

Research challenges
  • odel saillance en images, en vidéos, en 3D, en VR
  • Prédire le scanpath de la gaze
  • Mélanger les approches ascendantes (signal) et descendantes (cognitives)
PhD Theses
  • Dr Phutphalla Kong
  • Dr Alexander Milisavljevic
  • Pierre Marighetto
  • Ratha Si
Projects
Best attention model LSUN 2015 Princeton (no learning, SALICON dataset)
  • ERDF/DigiSpace
  • INTERREG/Trans Immersium

 

 

 

 

 

 

 


Geste, mouvement et 3D


Experts:

Pr T. Dutoit, Dr S. Laraba, Dr M. Mancas, Dr V. Vandenbulcke

Défis de recherche
Capturing Tai-Chi movements with the Qualisys system
  • avec des marqueurs
    • Inertie : Xsens
    • Optique : Optitrack, Qualisys
  • Sans marqueur
    • Kinect V1 et V2
    • Mouvement de saut
    • OpenPose (2D – 3D)
Thèses de doctorat
  • Dr Alexis Moinet
  • Dr Jerome Urban
  • Dr Christian Frisson
  • Dr Mathilde Brousmiche
Projets
  • FEDER/DigiSENSE
  • WALLINOV/ParkAR

Experts:

Pr T. Dutoit, Pr S. Dupont, Dr S. Laraba, Dr M. Mancas

Défis de recherche
Analyzing music and dance movements with MotionMachine
  • Obtenir des descripteurs de gestes
  • Filtrage et nettoyage automatiques des données mocap
  • Analyser le style/l’émotion dans les mouvements du corps
Thèses de doctorat
  • Dr Mickael Tits
Projets
  • EU-FP7/ Itreasures
  • MotionMachine
  • RW/WallInnov/ParkAR

Experts:

Pr T. Dutoit, Dr S. Laraba

Défis de recherche
Recognizing a selfie gesture
  • Reconnaissance automatique des gestes à partir de données de squelette 2D ou 3D
  • IA explicable
  • Sous-titrage automatique des vidéos de football
Thèses de doctorat
  • Dr Sohaib Laraba
Projets

 


 


Experts:

Pr T. Dutoit, Dr S. Laraba

Défis de recherche
Pruning Deep Learning in Interactive Motion Generation and Control
  • Synthèse automatique du mouvement à partir des signaux de commande
  • Évaluation de la qualité de la synthèse
  • Transfert de style
Thèses de doctorat
  • Antoine Maiorca

 

 

 


 


Experts:

Pr T. Dutoit, Dr S. Laraba

Défis de recherche
Multiple user collaboration in VR parks
  • Géolocalisation et tracking indoor
  • Analyse des interactions sociales
  • Collaboration multi-utilisateurs en VR
  • Définir des catégories relationnelles dans l’expérience de visite muséale
  • Analyse des activités dans les salles de classe
Thèses de doctorat
  • Ratha Siv
  • Marine Lagasse
  • François Rocca
Projets
  • Win2Wal/SmartVRPark
  • Beware/ViewSkyModel


Experts:
Depthmap obtained automatically from a 2D image

Pr B. Gosselin, Dr M. Mancas, Dr V. Vandenbulcke

Défis de recherche
  • Reconstruction 3D basée sur SLAM
  • Prédiction de profondeur à partir d’images 2D
  • Détection d’anomalies par drone
  • Apprentissage en profondeur explicable basé sur les bords pour la détection et la prédiction d’actions en temps réel
Thèses de doctorat
  • Dr Ambroise Moreau
  • Mohammed El Amine Mokhtari
  • Mohammed Benkedadra
Projets
  • Beware/ViewSkyModel
  • Win2Wal/DroneSecurity
  • PPP/Infrabel

Image et croquis

Experts

Pr S. Dupont, Dr O. Seddati

Défis de recherche
  • Analyse de croquis à la volée
  • Récupération d’informations basée sur des croquis
Thèses de doctorat
  • Dr. Omar Seddati
Projets
  • EU/i-MOTION
  • DeepSketch

 

 

Experts

Pr B. Gosselin, Pr S.Dupont

Défis de recherche
wheat detection
  • Classification et localisation des maladies du blé par apprentissage profond
  •  Reconnaissance de cartes de jeu pour le contrôle du robot
  •  Synthétiser des images avec le deep learning géométrique geometric deep learning
Thèses de doctorat
  • Elias Ennadifi
Projects
  • FSO/Tangerine and POC/Recocards
  • SPWDGO3/PhenWheat

 

 

 

Parole et langag

Experts:

Pr T. Dutoit, Pr S. Dupont, Dr K. El Haddad

Défis de recherche
  • Modélisation de l’expressivité (espaces latents)
  • Analyse et synthèse du rire
  • Expressions non verbales pour la compréhension du contexte
Thèses de doctorat
Non verbal expressions
  • Dr Thomas Drugman
  • Dr Huseyin Cakmak
  • Dr Maria Astrinaki
  • Dr Sandrine Brogneaux
  • Dr Jerome Urban
  • Dr Noah Tits
  • Dr Kevin El Haddad
Projets
  • RW/WIST/SPORTIC
  • EU-FP7/ILHAIRE
  • EU-CHISTERA/Joker
  • Win4Doc/DeepCall
  • FirstEnterprise/RedCall

 

 

 

Experts:

Pr T. Dutoit, Pr S. Dupont, Dr K. El Haddad

Défis de recherche
Deep learning-based speech recognition using a multitask approach
  • Apprentissage par transfert
  • Reconnaissance vocale multitâche
  • Reconnaissance des émotions
Thèses de doctorat
  • Dr Georgy Pironkov
  • Dr Noe Tits
  • Dr Kevin El Haddad
  • Hugo Bohy
Projects
  • UE / IGLU (compréhension interactive du langage ancré)

 

 

 

 

 

Experts

Pr T. Dutoit, Pr S. Dupont, Dr O. Sedatti, Dr K. El Haddad

Défis de recherche
Visual question answering
  • Modélisation automatique du langage
  • Réponse visuelle aux questions
  • Analyse des sentiments
  • Chatbots
Thèses de doctorat
  • Dr Jean-Benoît Delbrouck
  • Vincent Stragier
Projects
  • POC/DeepNEWS

 

 

 

 

 

Biomédical

Experts
EEG recording session during VR tasks

Pr B. Gosselin, Pr T. Dutoit, Dr M. Mancas, Dr S. Laraba, Dr V. Vandenbulcke

Research challenges
  • Interfaces cerveau-ordinateur en RA/VR
  • Induire une sédation via AR/VR
  • Neurosciences (Expliquer les mécanismes cérébraux par l’IA)
PhD Theses
  • Luca La Fisca
  • Victor Delvigne
Projects
  • BIOWIN/MonitoSed
Demos