Aller au contenu principal

Loïc Pauletto

Lundi 4 juillet 2022

Recherche d'architecture de réseaux de neurones pour la classification extrême et dans un contexte d'apprentissage partiellement étiqueté

Résumé:
Les applications d'apprentissage profond se développent rapidement et ne montrent aucun signe de ralentissement. Les topologies des réseaux neuronaux deviennent de plus en plus grandes et complexes pour résoudre les problèmes de la vie réelle.
Cette complexité accrue nécessite plus de temps et d'expertise de la part des professionnels, ainsi qu'un investissement financier important pour les entreprises d'IA.
La recherche d'architecture neuronale (RAN) est un nouveau paradigme d'apprentissage automatique qui cherche à déterminer la meilleure architecture de réseau neuronal pour un problème donné. Les techniques de RNA, d'autre part, n'ont été étudiées et développées que dans des problèmes d'apprentissage automatique limités et bien définis, qui ne sont pas représentatifs de tous les scénarios d'apprentissage automatique existants.
Cette thèse se concentre sur la recherche et le développement des approches RAN pour de nouvelles tâches ainsi que sur un nouveau cadre d'apprentissage qui est plus pertinent pour les applications du monde réel.
Nous avons proposé d'utiliser un cadre RAN neuro-évolutif pour résoudre le défi extrême de la classification multi-label en particulier.
Nous avons combiné des réseaux de convolution et récurrents pour fournir une recherche spatiale plus appropriée à cette tâche.
Sur plusieurs jeux de données, nous évaluons la performance du réseau recherché. Nous avons également examiné le défi de la reconstruction d'une carte RSSI, qui est un processus plus difficile en raison du manque de données d'entrée
(c'est-à-dire données partiellement annotées). De cette façon, nous proposons un système de recherche d'architecture dynamique pour les tâches de segmentation sémantique avec un nombre minimal d'échantillons annotés. Nous avons étudié plusieurs algorithmes d'apprentissage semi-supervisé dans ce cadre afin de déterminer celui qui réussit le mieux à utiliser des échantillons non étiquetés.
Nous avons examiné un certain nombre de stratégies, y compris des approches de semi-supervision "traditionnelles" et "nouvelles", ainsi que des approches d'auto-supervision.

Date et Lieu

Lundi 4 juillet 2022 à 10h00
Salle de Séminaire 2 dans le bâtiment IMAG
et
https://univ-grenoble-alpes-fr.zoom.us/j/93733417057?pwd=UzFaVFk2YUU2eHNBRG4wT1BYYVhMUT09 

Composition du Jury

Massih-Reza AMINI
Professeur des Universités, Université Grenoble Alpes, Directeur de thèse
Hichem SAHBI
Chargé de recherche HDR, CNRS, UPMC Sorbonne Université, Rapporteur
Stéphane CANU
Professeur des Universités, INSA Rouen, Rapporteur
Georges QUENOT
Directeur de recherche, CNRS, Université Grenoble Alpes, Examinateur
Jakob VERBEEK
Ingénieur HDR, Meta AI, Examinateur
Patrick REIGNIER
Professeur des Universités, Université Grenoble Alpes, Examinateur

Publié le 30 juin 2022

Mis à jour le 30 juin 2022