Détection des deepfakes audio adverses

Fonction
Département
Date
07-2024
Reference
Poste de Doctorant H/F - Offre de thèse (Références : SN/NE/PhD/PEPR2/072024)

Description

La conception de solutions fiables et robustes pour la détection des deepfakes est une bataille permanente contre les acteurs malveillants. Une fois qu'une nouvelle stratégie ou un nouvel algorithme d'attaque est identifié et que la solution de détection est correctement mise à jour, les acteurs malveillants peuvent concevoir de nouvelles attaques pour surmonter le nouveau détecteur. Les attaques deviennent naturellement de plus en plus sophistiquées et de nature adverse. Même si les attaques deepfake actuellement connues sont déjà adverses, à quelques exceptions notables près, elles ont été étudiées dans un scénario purement biométrique, alors qu'elles peuvent être conçues pour cibler à la fois les systèmes biométriques et le détecteur d'usurpation.

Cette thèse étudiera une nouvelle génération d'attaques adverses conçues pour tromper à la fois un système de biométrie vocale et un détecteur d'usurpation. En commençant par une sélection de détecteurs à l'état de l'art, nous concevrons des techniques de post-traitement pour supprimer les distorsions et les artefacts dans les signaux audios générés artificiellement (parole synthétique / convertie). Ce travail exposera la vulnérabilité des solutions existantes à des attaques plus adverses. En s'appuyant sur les concepts d'apprentissage adversarial, la deuxième étape consistera à concevoir des approches de détection qui capturent les caractéristiques des signaux de la parole que même les approches de synthèse et de conversion à l'état de l'art ne modélisent pas bien et qui ne peuvent pas être supprimées ou atténuées. Étant donné que l'apprentissage adversarial est généralement très exigeante en termes de calcul et peut aboutir à des modèles encore plus complexes que ceux utilisés actuellement, nous sommes également intéressés à étudier les techniques comme la distillation des connaissances, les réseaux enseignant-étudiant ou le `gradient flow preservation pruning’, pour réduire la complexité des modèles. Le but est d'apprendre des modèles efficaces et moins complexes qui sont plus adaptés aux applications pratiques.

Le candidat retenu rejoindra le groupe "Sécurité audio et vie privée" au sein du département "Sécurité numérique" d'EURECOM.  Vous travaillerez sous la supervision des Profs. Nicholas Evans et Massimiliano Todisco et avec le Prof. Driss Matrouf au Laboratoire d'Informatique Avignon (LIA), et il y aura des opportunités de collaboration internationale, par exemple avec les membres du comité d'organisation d'ASVspoof. Le poste est financé par le Programme prioritaire de recherche et d'équipement (PEPR) en cybersécurité de l'Agence nationale de la recherche (ANR).

[1] “ASVspoof 5 Evaluation Plan”, Hector Delgado, Nicholas Evans, Jee-weon Jung, Tomi Kinnunen, Ivan Kukanov, Kong Aik Lee, Xuechen Liu, Hye-jin Shim, Md Sahidullah, Hemlata Tak, Massimiliano Todisco, Xin Wang, Junichi Yamagishi, ASVspoof consortium, 2024 https://www.asvspoof.org/file/ASVspoof5___Evaluation_Plan_Phase2.pdf

Prérequis

  • Niveau d'études / diplôme : Maîtrise
  • Domaine / spécialité :  Informatique, Intelligence Artificielle, Traitement de la parole, Détection de Deepfake
  • Technologies / langages / systèmes : apprentissage automatique, apprentissage profond, Python et PyTorch
  • Autres compétences / spécialités : solides compétences en mathématiques, en analyse, en résolution de problèmes, en communication et en rédaction.
  • Autres éléments importants : un excellent parcours académique, la maîtrise de l'anglais.

Dossier de candidature

Les candidatures doivent être accompagnées de :

  • Curriculum Vitae détaillé,
  • Liste des publications en précisant les trois publications les plus importantes,
  • Document de deux pages présentant les perspectives de recherches et d’enseignement du candidat,
  • Noms et adresses de trois références.

Le tout est à adresser à secretariat@eurecom.fr sous la référence SN/NE/PhD/PEPR2/072024

Date d'embauche : Poste à pourvoir de suite
Durée du contrat : Durée de la thèse

 

More info