Titre long du travail de recherche
Exploitation de la structure partiellement séparable dans les méthodes quasi-Newton pour l'optimisation sans contrainte et l'apprentissage profond
Titre vulgarisé du travail de recherche
Exploitation des dérivées partitionnées en optimisation sans contrainte et apprentissage profond
1) Courte présentation : Prénom, nom, programme d’études, directeur/directrice de recherche, en quoi consiste votre recherche
Je m'appelle Paul Raynaud et je suis en dernière année de doctorat en cotutelle, dont la spécialité est mathématiques de l'ingénieur à Poly. Mon doctorat s'effectue sous la direction de Dominique Orban (Poly) et Jean Bigeon (France).
Mon projet de thèse porte sur la résolution de problèmes partiellement-séparables, qui est une propriété influant sur la structure des dérivées.
Les algorithmes que je développe tirent avantage de cette structure afin de résoudre les problèmes plus efficacement.
Ces algorithmes peuvent également s'appliquer dans le cadre de l'entraînement de réseau de neurones, ce qui, lorsque l'architecture du réseau est adéquate, permet une nouvelle manière de paralléliser les calculs lors de l'apprentissage.
2) Quelle a été votre méthode pour expliquer votre thèse en 3 minutes?
Premièrement, j'ai essayé de donner un aperçu des outils utilisés dans ma thèse (les dérivées) à travers un exemple accessible ainsi que quelques exemples d'application de ma recherche.
Ayant conscience de la difficulté d'introduire les concepts d'une recherche abstraite, la majorité de ma présentation est basée sur cette introduction.
Finalement, j'explique (un peu plus) concrètement ma recherche ainsi que mes contributions et leurs retombées.
3) Comment votre sujet de recherche a-t-il été inspiré?
Mon sujet est la suite de travaux entrepris dans les années 80-90.
Depuis, un petit groupe de chercheurs, dont un de mes directeurs, à travailler sur la question et développer des méthodes d'optimisation très efficace.
Cependant, le sujet est tombé en désuétude depuis 20 ans et les logiciels disponibles sont commerciaux ou quasiment inutilisables.
L'idée était donc de donner un nouveau souffle à ce sujet de recherche, qui a l'avantage de s'appliquer à de larges problèmes, ce qui est plus que jamais d'actualité !
4) Si vous deviez consacrer vos recherches à quelqu'un du passé, du présent ou du futur, qui serait-ce et pourquoi?
Je dédierais ma recherche à ma mère. Si jamais un jour ma recherche est reconnue, j'espère que ça rejaillira sur elle indirectement, ce qui serait un juste retour des choses après les sacrifices de carrière qu'elle a fait afin de m'élever.