Mes travaux (actuels) portent principalement sur la programmation dynamique stochastique et plus particulièrement les Processus de Décision Markovien.

Processus de Décision Markovien

Les Processus de Décision Markovien trouvent leurs applications dans le domaine du réseau (sélection de technologies dans les réseaux sans fils) et également de la logistique et la gestion de stock et du Revenue Management.

Modèles avec pertes

Un autre axe de recherche concerne le contrôle d'admission en utilisant des techniques de processus de décisions dans le contexte de modèles avec pertes (domaine d'application call center par exemple).

Modèles pour le cloud avec apprentissage par renforcement

Un autre axe de recherche concerne le contrôle de l'activation et de la désactivation des machines virtuelles dans un cloud afin de libérer de l'énergie.

Théorie des jeux

Enfin je m'intéresse aussi à des problématiques liées à la théorie des jeux. Je m'intéresse d'une part à la théorie des jeux coopérative (comment partager des investissements communs ou des gains communs selon l'apport) et également aux algorithmes de complémentarité linéaire qui permettent de trouver des équilibres dans des jeux à deux joueurs ou des modèles économiques plus complexes mais linéaires.

Radar target search

Allocation des observations dans des radars pour le suivi de cible

• Alexis Guigal (depuis janvier 2025) — Commande de capteurs dans un système de défense multi-plateformes. Thèse CIFRE avec Thalès.
• Orso Forghieri (septembre 2023 - décembre 2025) — Hierarchical reinforcement learning algorithms for controlling large systems. Thèse financée par l'École Polytechnique.
• Hugo Vaillaud (octobre 2020 - novembre 2023) — Coordination des systèmes multi-capteurs aéroportés de défense. Thèse CIFRE avec Thalès.
• Thomas Tournaire (février 2019 - avril 2022) — Model-Based Reinforcement Learning for Dynamic Resource Allocation in Cloud Environments. Thèse CIFRE avec Nokia.

Encadrement de stages de M2

Encadrement, depuis 2005, de 15 stages de recherche de M2 (provenance : M2 AMIS Université de Versailles, Master RES Sorbonne Université, Master Modo Université PSL).

Groupe de travail du GDR ROD

Je suis co-animateur (avec Ana Busic) du groupe de travail COSMOS (Contrôle et Optimisation Stochastique MOdélisation et Simulation) du pole 3 du GDR ROD.

Voir le site du GDT COSMOS.

Économie optimisation informatique

L'objectif de ce groupe de travail est d'explorer les liens possibles entre les problématiques d'économie et les techniques d'optimisation issues de la recherche opérationnelle. Plus de renseignements

Marmote

Je fais partie du projet de l'ANR Marmote (avec un seul T).

OCOQS

J'ai fait partie du projet ARC de l'INRIA OCOQS.

marmoteMDP

Je suis aussi impliqué dans le projet marmote https://marmote.gitlabpages.inria.fr/marmote/
C'est est un logiciel de manipulation de Chaînes de Markov. Je suis le principal contributeur de marmoteMDP.
Ce petit marmotons (puisque add on au projet marmote) est détaillé ici pour des aspects non stable du projet.

Programme Résolution Linear Complementarity Problem

J'ai aussi (dans le cadre du projet ecopti) développé un programme, basé sur l'algorithme de Lemke-Howson, permettant de calculer les équilibres dans un jeu bimatriciel (via la résolution d'un problème LCP). Ce programme est disponible sur demande.