concept

IA explicable

Explainable AI is a subfield of artificial intelligence focused on making the decisions and inner workings of AI models understandable to humans.
45 articles liés

Description

L’intelligence artificielle explicable (XAI) est un domaine qui rend le fonctionnement des modèles d’apprentissage automatique transparent pour l’humain. Contrairement aux réseaux neuronaux traditionnels — « boîtes noires », XAI fournit une interprétation : pourquoi le modèle est arrivé à cette conclusion, quelles caractéristiques étaient importantes, dans quelle mesure la prédiction est fiable. Les approches se divisent en modèles interprétables (arbres de décision, modèles linéaires) et en explications post-hoc pour les modèles complexes déjà entraînés (LIME, SHAP, cartes de gradients). C’est essentiel en médecine, finance, droit, où une erreur peut coûter la vie ou la liberté.

Histoire

Le problème de la boîte noire s’est aggravé avec la renaissance de l’apprentissage profond en 2012. Les premiers travaux sur l’interprétation des modèles incluent l’analyse des poids dans les années 1990, mais en tant que discipline, XAI s’est formé après 2016, lorsque la DARPA a lancé le programme Explainable AI. Le droit formel à l’explication des décisions algorithmiques a été consacré par le Règlement général sur la protection des données (RGPD) dans l’UE.

Comment ça marche

XAI repose sur des méthodes d’approximation de la fonction de décision complexe par un modèle interprétable simple dans le voisinage local de chaque exemple (LIME). SHAP utilise la théorie des jeux : la contribution de chaque caractéristique est calculée comme sa contribution marginale sur tous les sous-ensembles possibles de caractéristiques. Les méthodes basées sur les gradients (Grad-CAM) visualisent les zones de l’image d’entrée qui ont le plus activé les neurones de la dernière couche convolutive, en utilisant les gradients de la classe cible. Pour les modèles de texte (transformers), le mécanisme d’attention permet de mettre en évidence les mots importants.

En pratique

Le médecin voit non seulement le diagnostic de l’IA, mais aussi l’image avec la tumeur en surbrillance pour vérifier lui-même. La banque explique au client pourquoi elle a refusé le crédit.

Anecdote

L’une des méthodes XAI, SHAP, est nommée d’après Shapley de la théorie des jeux — elle répartit équitablement la « contribution » de chaque caractéristique à la décision, comme une prime entre les joueurs d’une équipe.

Concept graph →

Articles liés · 98

L'écho dans une pièce vide : comment des agents IA jetables, sans mémoire, ont créé un langage commun
Le comportement collectif des agents IA s'est manifesté pour la première fois non pas en laboratoire, mais en milieu sauvage, sur un site wiki trouvé par hasard, où les agents écrivaient des indices pour réussir le test.
L'atlas de la physique interne d'un modèle de neutrinos : une bibliothèque que son destinataire ne lit pas
Dans la glace antarctique, une particule fantôme ne laisse qu'un faible éclat de lumière bleue. Le détecteur IceCube capture ces éclats, et à partir d'eux, il faut déterminer d'où vient la particule. Le modèle PolarBERT a appris à le faire, mais ce qu'il voit réellement à l'intérieur restait un mystère.
L'atlas de la physique interne d'un modèle de neutrinos : une bibliothèque que son destinataire ne lit pas
Dans la glace antarctique, une particule fantôme ne laisse qu'un faible éclat de lumière bleue. Le détecteur IceCube capture ces éclats, et à partir d'eux, il faut déterminer d'où vient la particule. Le modèle PolarBERT a appris à le faire, mais ce qu'il voit réellement à l'intérieur restait un mystère.
L'IA cherche des matériaux comme un chef cuisinier
La recherche d'un nouveau matériau ressemble à la cuisine sans recette : on essaie, on essaie, et souvent on jette. Avant, les scientifiques feuilletaient les articles à la main et testaient les compositions une par une. Maintenant, un « robot-cuisinier » est apparu, qui lit lui-même la littérature, mélange les composants et regarde ce que ça donne.
Les épidémies respirent en cadence
Chaque hiver, les hôpitaux se remplissent, et l'été, ils semblent se vider. Les épidémies respirent comme la marée. Mais pourquoi les vagues de maladies déferlent-elles sans cesse, même sans nouvelles mutations ? Les mathématiciens ont trouvé la réponse dans la rivalité entre deux souches.
Un biais qui n'a pas besoin d'être appris
Dans un entrepôt, des cartons de pommes et de poires. Les pommes sont nombreuses, les poires rares. Mais quand le magasinier dit « un fruit à la peau lisse », nous pensons plus souvent à la poire rare qu'à la pomme fréquente. C'est l'effet de taux de base inversé : un dérèglement persistant dans la façon dont le cerveau résout l'ambiguïté entre les catégories.
Un biais qui n'a pas besoin d'être appris
Dans un entrepôt, des cartons de pommes et de poires. Les pommes sont nombreuses, les poires rares. Mais quand le magasinier dit « un fruit à la peau lisse », nous pensons plus souvent à la poire rare qu'à la pomme fréquente. C'est l'effet de taux de base inversé : un dérèglement persistant dans la façon dont le cerveau résout l'ambiguïté entre les catégories.
L'intelligence artificielle gèle sous la chaleur
Dans un four, quand la température augmente, les molécules se déplacent plus vite et le désordre s'accroît. Avec les modèles de langue comme ChatGPT, c'est tout l'inverse. Lorsque les développeurs augmentent le paramètre « température », le modèle accède à un choix de mots plus large, mais ses textes longs se figent soudainement.
Comment les idées apprennent les unes des autres
L'esprit humain ressemble à un jeu de construction qui s'auto-construit. Les nouvelles idées ne meurent pas avec leur créateur : elles se transmettent, se mélangent et sont sélectionnées. Ce processus est appelé évolution culturelle : les inventions utiles se consolident, les inutiles tombent dans l'oubli. C'est le principe du cliquet, ce mécanisme qui ne tourne que dans un sens.
Un guide électronique pour la vision artificielle
Une prothèse oculaire transmet au cerveau non pas une photographie, mais un pointillé clairsemé de points lumineux — les phosphènes. Pour distinguer une tasse ou des clés dans ce scintillement, la personne doit balayer la tête comme une lampe de poche dans l'obscurité et assembler petit à petit les contours de l'objet.
Un puzzle qui ne s'assemble pas : un réseau de neurones cherche des quasars anormaux
En assemblant le puzzle de l'Univers, les astronomes ont l'habitude que chaque nouvelle pièce s'emboîte parfaitement dans le tableau déjà constitué. Mais parfois, ils tombent sur des morceaux qui semblent découpés dans un autre jeu. Vingt mille noyau actif de galaxie — et onze pour cent d'entre eux, le réseau de neurones les rejette résolument comme étrangers.
Calcul et langage2026-07-202 minarXiv:2607.18056express
L'intelligence artificielle apprend à créer des virus
En 2025, les grands modèles de langage comme GPT ne se contentent plus de discuter — ils aident les scientifiques à monter des expériences. Mais le même outil peut tomber entre les mains de personnes malveillantes. Une équipe de chercheurs a construit un terrain d'essai numérique pour le vérifier.
Comment l'intelligence artificielle a déchiffré l'écriture magnétique des éruptions solaires
Le Soleil trace continuellement des gribouillis de champs magnétiques à sa surface. Ces motifs ne sont pas de simples ondulations, mais une écriture dans laquelle la nature a crypté des avertissements d'éruptions.
Comment l'intelligence artificielle a déchiffré l'écriture magnétique des éruptions solaires
Le Soleil trace continuellement des gribouillis de champs magnétiques à sa surface. Ces motifs ne sont pas de simples ondulations, mais une écriture dans laquelle la nature a crypté des avertissements d'éruptions.
Comment identifier un ennemi dans le ciel en quelques secondes
En plein combat, un pilote doit comprendre instantanément ce qu'est un objet et quelles sont ses intentions. Les systèmes conventionnels attendent des données radar complètes – c'est comme un gardien qui ne réagit qu'après le tir. Le nouvel algorithme, lui, agit comme un gardien chevronné : dès les premiers mouvements de l'attaquant, il anticipe la manœuvre de la cible.
Physique médicale2026-07-161 minarXiv:2607.14870express
L'IA planifie la radiothérapie en deux minutes
Chaque matin, un navigateur GPS trace un itinéraire en évitant les embouteillages et les routes barrées. À l'instar de ce navigateur, un nouvel agent d'IA reconstruit à chaque séance de radiothérapie le trajet du faisceau d'irradiation.
Une carte qui n'a pas peur d'avouer : « Je ne sais pas »
Un groupe de robots explorateurs, c'est un peu comme une brigade de cuisiniers qui goûtent le même plat. Chacun prélève un échantillon de sa zone et donne son avis : libre, occupé, ou incertain. Mais les goûts sont subjectifs — l'un n'a pas remarqué le pied de chaise, l'autre n'a léché que le bord.
Apprendre à l'IA à ne pas confondre des IRM similaires
Une IA classique regarde les images médicales comme des puzzles faits de pièces inconnues : elle considère que deux images non appariées sont complètement différentes. C'est comme essayer de distinguer des jumeaux sans connaître leur lien de parenté. Or, en médecine, les patients atteints d'une même maladie présentent des IRM presque identiques, et l'algorithme se trompe en confondant les « parents ».
Le cartographe neuronal : à la découverte des lois invisibles
De nombreux processus naturels sont décrits par des équations, mais nous n'en connaissons que des fragments. La nouvelle méthode agit comme un cartographe qui, à partir de quelques repères, reconstitue une carte complète du territoire.
L'illusion de la précision : quand la validation de l'IA en acoustique induit en erreur
L'intelligence artificielle qui prédit l'acoustique d'une salle fait penser à un étudiant qui triche à l'examen avec une antisèche. Si les points de validation sont les mêmes que ceux de l'entraînement, le modèle se contente de mémoriser l'« empreinte » sonore de chaque position, comme un étudiant qui reconnaît un sujet grâce à un coin de page plié.
Un esprit vivant : pourquoi l'IA sans corps reste aveugle
L'approche standard actuelle de l'apprentissage de l'IA ressemble à un enfant enfermé dans une bibliothèque : il mémorise des millions de livres, mais ignore que le feu brûle et que la chute fait mal.
Le jumeau numérique : comment les comportements invisibles changent les plans
Dans tout projet urbain, le comportement des habitants est une force invisible dont dépend le succès. Un voisin hésitant peut ralentir l'installation de panneaux solaires dans tout un quartier : sa prudence déclenche une croissance du désordre.
Pourquoi l'intelligence artificielle répète les mêmes erreurs
Les catastrophes technologiques, comme Tchernobyl, surviennent rarement de façon soudaine. Elles couvent pendant des années : les organisations ignorent les avertissements, car leur complexité évoque la croissance de l'entropie — cette mesure du chaos inexorable qui s'accumule en silence jusqu'à ce qu'il s'abatte comme une avalanche.
Comment l'IA a cessé de confondre les sons dans un scénario
Les modèles qui transforment le texte en audio reproduisent bien les sons isolés, mais se mélangent les pinceaux quand le scénario en comporte plusieurs. Par exemple, selon le scénario, on a d'abord une sonnerie, puis des pas, puis un claquement de porte. Le générateur peut intervertir les événements, et le spectateur entendra les pas avant la sonnerie.
Son2026-07-151 minarXiv:2607.13477express
Les juges IA n'écoutent pas avec leurs oreilles, mais avec des étiquettes
Les juges automatiques de la parole sont des algorithmes qui évaluent la prononciation et les émotions. Cependant, ils fonctionnent souvent comme un critique culinaire qui rend son verdict après avoir lu le menu, sans avoir goûté le plat.
Comment l'IA apprend à ne pas copier sur son voisin
L'IA diagnostique apprend comme un étudiant en médecine avant l'examen. On lui donne une radiographie et les plaintes du patient. Mais parfois, parmi les supports de cours, se glisse le rapport complet du médecin — la réponse toute faite. Le réseau neuronal la mémorise, et sa précision au test bondit à 98 %. Mais c'est de la triche : la vraie compétence ne se développe pas.
L'IA à la loupe et au spectromètre : évaluer la qualité des images
Évaluer la qualité d'une image, c'est le travail d'un contrôleur méticuleux muni de tout un attirail. Le réseau de neurones IQA-T1 agit exactement ainsi : il ne se contente pas de dévisager l'image, il y applique tantôt un spectroscope, tantôt un luxmètre.
L'IA maîtrise les recettes des transformations chimiques
La préparation d'un plat complexe exige une recette claire : d'abord couper, puis faire revenir, ajouter les épices au bon moment. Les transformations chimiques suivent aussi des recettes pas à pas — des mécanismes où les atomes de carbone et d'hydrogène se réarrangent strictement dans l'ordre.
Robotique2026-07-141 minarXiv:2607.12861express
La carte invisible de l'essaim de robots
Un essaim de robots ressemble à une nuée de lucioles : chacun se déplace au hasard « là où c'est plus libre », et le chaos se transforme en ordre. Pendant longtemps, on s'est demandé comment, sans communication ni commandes, naissait cette coordination.
Comment l'IA a cessé de lire pour rien
Les assistants logiciels d'écriture de code agissent souvent comme un cuisinier qui, pour faire cuire un seul œuf, relit tout son livre de recettes. Face à une demande de correction minuscule, ils rouvrent des dizaines de fichiers et vérifient des liens connus depuis longtemps. C'est du travail inutile — de l'énergie gaspillée.
Contrôleur flotteur : la stabilité par une équation instantanée
Le flotteur dans la chasse d'eau est un contrôleur idéal : en sentant le niveau de l'eau, il ramène instantanément le système à l'équilibre sans se soucier du passé. Des ingénieurs ont appliqué ce principe aux réseaux de neurones.
Le doute se trahit par le silence : l'IA lit les pauses
Un nouveau système analyse un court entretien pour reconnaître les doutes d'une personne, en combinant texte, voix et expressions faciales. Mais la clé principale de l'incertitude s'est révélée être la matière noire de la parole : les pauses et les mots de remplissage que les systèmes vocaux standard effacent comme un trou noir.
L'énergie ouvre ses données à l'intelligence artificielle
Un réseau électrique vivant ressemble à un organisme : les lignes à haute tension sont les vaisseaux, le courant est le sang. Les données, elles, sont les influx nerveux qui se perdaient autrefois. mAIEnergy connecte ces « nerfs » à un « cerveau » commun.
La symphonie des atomes : quand l'IA transforme le microscope en chef d'orchestre de la matière
Le microscope électronique est un orgue géant : au lieu des tuyaux, des lentilles électromagnétiques ; au lieu de l'air, un flux d'électrons accélérés. Autrefois, il ne faisait que dessiner des fresques muettes du monde atomique, condamnant les scientifiques à un déchiffrage épuisant.
Le livre de cuisine des protéines
Une immense cuisine : chaque recette est une protéine, et le plat final, c'est son travail dans la cellule. Pour préparer un mets complexe, il faut souvent mélanger plusieurs ingrédients et les laisser « prendre » dans la bonne forme. Jusqu'ici, les chefs-scientifiques ne pouvaient que deviner comment les recettes des autres se replieraient.
Le vote des impairs : comment la différence symétrique accélère les automates
Dans la salle d'audience, une chaîne de caractères est présentée en entrée. Douze jurés (les chemins de calcul) l'examinent symbole par symbole. Chacun peut déclarer « coupable » (accepter) ou « non coupable ». Pour un automate non déterministe ordinaire (NFA), un seul vote « pour » suffit.
Comment de faibles agents d'IA s'emparent des réseaux : la cristallisation des inégalités
Une infime poussière dans une solution sursaturée se couvre en quelques secondes de facettes de cristal. Les particules voisines restent invisibles. Un processus similaire a récemment été découvert dans les communautés d'grands modèles de langage.
La retouche selon les règles : où s'arrête la science et commence la tromperie
À l'écran, le résultat d'une simulation complexe : deux planètes entrent en collision, une onde de choc se propage. Quelques clics dans l'éditeur – et les ombres dures s'adoucissent, le bruit s'estompe, l'arrière-plan s'assombrit. Cette retouche numérique (modification d'une image pour améliorer son apparence) fait depuis longtemps partie de l'arsenal des scientifiques.