How the work takes shape
Méthodes.
Documents / 3
- 01
Méthodes
Reconnaissance émotionnelle multimodale par attention croisée
Encoder l’audio, le texte et la vidéo, apprendre les dépendances entre modalités et évaluer les prédictions émotionnelles.
- 02
Méthodes
Renforcement itératif des caractéristiques par attribution
Utiliser des explications fondées sur les valeurs de Shapley pour examiner les caractéristiques acoustiques et affiner un modèle émotionnel.
- 03
Méthodes
Apprendre une représentation multirésolution du signal
Du signal brut à l’analyse en ondelettes apprenable, au débruitage appris et à une représentation adaptée à la tâche.