Why Should I Choose You? AutoXAI: A Framework for Selecting and Tuning eXplainable AI Solutions

In recent years, a large number of XAI (eXplainable Artificial Intelligence) solutions have been proposed to explain existing ML (Machine Learning) models or to create interpretable ML models. Evaluation measures have recently been proposed and it is now possible to compare these XAI solutions. However, selecting the most relevant XAI solution among all this diversity is still a tedious task, especially when meeting specific needs and constraints. In this paper, we propose AutoXAI, a framework that recommends the best XAI solution and its hyperparameters according to specific XAI evaluation metrics while considering the user's context (dataset, ML model, XAI needs and constraints). It adapts approaches from context-aware recommender systems and strategies of optimization and evaluation from AutoML (Automated Machine Learning). We apply AutoXAI to two use cases, and show that it recommends XAI solutions adapted to the user's needs with the best hyperparameters matching the user's constraints.Comment: 16 pages, 7 figures, to be published in CIKM202

L'explicabilité au service de l'extraction de connaissances : application à des données médicales

International audienceThe use of machine learning has increased dramatically in the last decade. The lack of transparency is now a limiting factor, which the field of explainability wants to address. Furthermore, one of the challenges of data mining is to present the statistical relationships of a dataset when they can be highly non-linear. One of the strengths of supervised learning is its ability to find complex statistical relationships that explainability allows to represent in an intelligible way. This paper shows that explanations can be used to extract knowledge from data and shows how feature selection, data subgroup analysis and selection of highly informative instances benefit from explanations. We then present a complete data processing pipeline using these methods on medical data.L'utilisation de l'apprentissage automatique a connu un bond cette dernière décennie. Le manque de transparence est aujourd'hui un frein, que le domaine de l'explicabilité veut résoudre. Par ailleurs, un des défis de l'exploration de données est de présenter les relations statistiques d'un jeu de données alors que celles-ci peuvent être hautement non-linéaires. Une des forces de l'apprentissage supervisé est sa capacité à trouver des relations statistiques complexes que l'explicabilité permet de représenter de manière intelligible. Ce papier montre que les explications permettent de faire de l'extraction de connaissance sur des données et comment la sélection de variables, l'analyse de sous-groupes de données et la sélection d'instances avec un fort pouvoir informatif bénéficient des explications. Nous présentons alors un pipeline complet de traitement des données utilisant ces méthodes pour l'exploration de données médicales

AutoXAI: Un cadre pour sélectionner automatiquement la solution d'XAI la plus adaptée

National audienceCe papier est un résumé des travaux publiés à la conférence CIKM 2022, Cugny et al. (2022). Un grand nombre de solutions d'XAI (eXplainable Artificial Intelligence) ont été proposées ces dernières années. Récemment, grâce à de nouvelles mesures d'évaluation des explications, il est devenu possible de les comparer. Cependant, la sélection de la solution d'XAI la plus pertinente reste une tâche fastidieuse, surtout si l'utilisateur a des besoins et des contraintes spécifiques. Dans cet article, nous proposons d'introduire AutoXAI, un cadre qui recommande la meilleure solution d'XAI et ses hyperparamètres au regard du contexte de l'utilisateur (ensemble de données, modèle d'apprentissage, besoins et contraintes liées à l'XAI). Notre approche s'inspire des travaux liés au domaine des systèmes de recommandation adaptés au contexte ainsi que de l'AutoML (Automated Machine Learning) pour nos stratégies d'optimisation et d'évaluation. Dans ce papier résumé, nous illustrons notre approche au travers d'un cas d'usage montrant qu'AutoXAI recommande bien une solution adaptée (avec les meilleurs hyperparamètres) aux besoins et contraintes de l'utilisateur