Scientist

Ashish Vaswani

1986– · Intelligence artificielle, apprentissage automatique, traitement du langage naturel
Chercheur en intelligence artificielle, auteur principal de l'article révolutionnaire « L'attention est tout ce dont vous avez besoin », qui a présenté l'architecture Transformer. Ce modèle, basé exclusivement sur des mécanismes d'attention, a révolutionné le traitement du langage naturel et a donné naissance à l'ère des grands modèles de langage, tels que BERT et GPT.

Biographie

Il a fait ses études à l'Institut indien de technologie, a obtenu son doctorat à l'Université de Californie à Berkeley. Il a travaillé chez Google Brain, puis est devenu co-fondateur de la start-up Adept AI Labs, qui se consacre à la création d'agents IA universels.

Découvertes clés

💡 L'article « Attention Is All You Need » a été rejeté lors d'une conférence, mais est devenu plus tard le travail le plus influent dans le domaine du TAL, donnant naissance à l'ère des grands modèles de langage.
"Il affirmait que l'attention est tout ce dont on a besoin."
Notions
mécanisme d'attention

Articles liés

Connexions denses contre résiduelles : comment DenseNet-121 surpasse ResNet-50 dans la détection du cancer du cerveau
L'épaisseur d'une coupe de tissu cérébral n'est que de 5 microns, soit vingt fois plus fine qu'un cheveu humain. Sur une telle coupe, le pathologiste recherche des signes de tumeur : forme anormale des noyaux, densité cellulaire accrue, vaisseaux anormaux. C'est un travail minutieux, et deux spécialistes peuvent avoir des avis divergents sur la même image.
Tous les traces d'un coup : comment LHCb lit la naissance des mésons B dans son ensemble
En 2016, le détecteur LHCb au Grand collisionneur de hadrons a enregistré des millions de collisions proton-proton. Parmi les débris de ces collisions naissaient des mésons B neutres, des particules qui peuvent spontanément se transformer en leurs antiparticules et vice versa.
Physique médicale2026-01-022 minarXiv:2601.00685express
Radiothérapie cérébrale : un clic au lieu d'un réglage manuel
Lorsqu'une tumeur affecte tout le cerveau, les médecins irradient l'ensemble de l'organe. C'est une méthode fiable, mais le réglage de l'irradiation est un travail minutieux : il faut choisir les paramètres pour que la tumeur reçoive la dose appropriée tout en épargnant au maximum les yeux et les cristallins.
Comment l'IRM prédit la réponse à la chimiothérapie dans le glioblastome
Le glioblastome, tumeur cérébrale, est sournois : chez certains patients, le témozolomide fonctionne, chez d'autres, presque pas. La différence réside souvent dans une petite région de l'ADN, le gène MGMT. Si cette région est chimiquement « éteinte » (méthylée), la tumeur répare moins bien ses cellules, et le médicament frappe plus précisément.
La carte de l'âge du cerveau
Le cortex cérébral ressemble à une feuille de papier froissée : il a une épaisseur, des courbures et une profondeur de plis. Avec l'âge, cette feuille se modifie de manière inégale – par endroits elle s'amincit, par endroits elle perd la netteté de ses courbures. Autrefois, les médecins évaluaient l'âge du cerveau dans son ensemble, comme s'ils regardaient la feuille de loin.
Physique médicale2026-01-212 minarXiv:2601.14654express
Un faisceau de protons sous l'œil d'un cristal
Traiter un cancer avec un faisceau de protons, c'est un peu comme tirer à l'arc : il faut atteindre la cible sans rien toucher autour. Les protons libèrent leur énergie en fin de parcours, si bien que les tissus sains sont presque épargnés. Mais pour que le tir soit sûr, chaque plan de traitement est vérifié à l'avance : on mesure la dose que recevra la tumeur et ce qui reviendra aux organes voisins.
Repérer Alzheimer sans piqûre
Un détective cherche un criminel dans ses fichiers, mais les portraits y sont mélangés. Il s'attend à un homme à la barbe grise, alors que le criminel est jeune et imberbe. De même, les médecins ne reconnaissent souvent pas la maladie d'Alzheimer chez ceux qui présentent des symptômes inhabituels : non pas une perte de mémoire, mais des troubles de la vision ou du langage.
Tumeur cérébrale sur les images : où s'arrête la certitude
Le tissu cérébral sur une image évoque un ciel d'orage : des taches claires, des creux sombres, des bords flous. La tumeur se cache parmi ces motifs, et le médecin doit en tracer le contour pour planifier une opération ou une radiothérapie. Un mode d'IRM met en évidence l'œdème, un autre le noyau de la tumeur, un troisième les zones mortes.
Physique médicale2026-01-262 minarXiv:2601.18219express
Diagnostic sans lentilles : le cancer du sein se voit dans les ombres
Dans une pièce sombre, sur une table, se trouvent un pointeur laser, un morceau de verre avec du tissu et une caméra de téléphone ordinaire. La lumière traverse l'échantillon, et sur l'image apparaissent non pas des cellules, mais un motif de bandes claires et sombres, comme l'ombre du feuillage sur un mur.
Physique médicale2026-02-052 minarXiv:2602.06212express
Des rayons qui soignent et qui blessent
Lorsqu'on irradie une tumeur dans la région de la tête ou du cou, les rayons traversent aussi les tissus sains. Parfois, l'os de la mâchoire commence à se nécroser après cela – c'est une complication grave appelée ostéoradionécrose. La question n'est pas de savoir si cela arrive, mais dans quelle mesure la dose d'irradiation elle-même augmente le risque.
Comment les cellules tumorales errent dans le labyrinthe du cerveau
Une tumeur cérébrale ressemble à un voyageur qui erre dans une forêt dense : les arbres et les buissons représentent les différents types de tissu cérébral, certains plus faciles à traverser que d'autres. Les cellules de gliome ne se déplacent pas en ligne droite, mais serpentent constamment, butant sur des obstacles et les contournant.
Comment le cancer choisit sa route
La tumeur ne reste pas en place. Des cellules individuelles ou des groupes entiers s'en détachent et partent en voyage à travers le corps. Certaines rampent en solitaires, comme des éclaireurs, d'autres restent ensemble, comme une petite bande. Des scientifiques ont construit un modèle informatique pour comprendre comment ces cellules choisissent leur direction.
Physique chimique2026-02-202 minarXiv:2602.18284express
Une sonde lumineuse pour détecter le cancer
La chimiothérapie classique frappe tout le corps comme un bombardement en tapis : les cellules cancéreuses et les cellules saines en souffrent. Les scientifiques cherchent une arme plus précise — des molécules qui s'illuminent lorsqu'elles s'insèrent dans l'ADN d'une cellule cancéreuse, révélant ainsi sa localisation.
Physique médicale2026-02-242 minarXiv:2602.21354express
Le cerveau à la loupe : le tomographe capture chaque détail
Une caméra qui ne filme pas le visage, mais le cerveau lui-même, de l'intérieur, couche par couche. Les tomographes classiques donnent souvent une image floue : les petits détails se fondent, comme des lettres sur une vitre embuée. Des ingénieurs ont décidé de construire un appareil qui voit nettement même ce qui est plus petit qu'un millimètre.
Le cerveau comme de l'argile : pourquoi il rétrécit dans la maladie d'Alzheimer
La maladie d'Alzheimer commence insidieusement : au plus profond du cerveau, deux protéines s'accumulent : la protéine tau et l'amyloïde-bêta. Elles se comportent comme des graines de mauvaise herbe : un amas qui apparaît pousse les cellules voisines à produire des amas similaires.
Physique biologique2026-03-211 minarXiv:2603.20764express
L'intelligence artificielle surveille les microbes
Pour ne pas perdre de vue un footballeur rapide, un drone n'a pas besoin d'une balise lumineuse : il suffit de reconnaître sa silhouette. De la même manière, un réseau de neurones suit désormais les microbes : l'algorithme analyse une image ordinaire de microscope et trouve instantanément la bactérie dans une goutte d'eau.
Comment les lymphocytes T reconnaissent l'ennemi : un nouveau regard sur le passeport immunitaire
Lorsqu'un virus pénètre dans l'organisme ou qu'une cellule cancéreuse apparaît, les lymphocytes T entrent en scène – ce sont les soldats du système immunitaire. Chaque lymphocyte T possède son propre récepteur, une molécule en forme de serrure, qui cherche la clé correspondante : un fragment de protéine (un peptide) à la surface de la cellule malade.
Un cerveau virtuel choisit le traitement
Le cerveau d'une personne atteinte de la maladie de Parkinson fonctionne comme un orchestre dont le chef tantôt se fige, tantôt agite sa baguette à contretemps. Les médicaments n'aident pas tout le monde, et les médecins proposent alors la stimulation — de faibles impulsions électriques qui rétablissent le rythme.
Physique médicale2026-04-032 minarXiv:2604.03431express
Une lampe fluorescente pour le chirurgien
Au bloc opératoire, le chirurgien éclaire la tumeur avec un agent spécial qui la fait briller. Mais comment savoir si elle brille fort parce qu'elle contient beaucoup de cellules cancéreuses, ou simplement parce qu'elle est proche de la surface ?
Comment les graphes détectent le mélanome sur la peau
Un grain de beauté sur la peau ressemble à une mosaïque de morceaux colorés. Chaque morceau est une petite zone de l'image où la couleur et la texture ne changent presque pas. On appelle ces morceaux des superpixels. Si on les relie par des lignes, on obtient un réseau semblable à un plan de métro : les stations sont les morceaux, et les lignes sont les connexions entre eux.
Multimédia2026-04-102 minarXiv:2604.14216express
Comment prédire l'issue d'une opération du cerveau
Quand les médicaments ne suffisent pas contre l'épilepsie, les médecins proposent une opération : retirer la zone du cerveau où naissent les crises. Mais dire à l'avance si cela aidera une personne en particulier est difficile. Les IRM avant l'opération ne montrent que l'état actuel, pas comment le cerveau changera après l'intervention.
Physique médicale2026-04-112 minarXiv:2604.10174express
Pourquoi le cerveau a un point faible face aux radiations
Lorsqu'on irradie une tumeur dans le cerveau, une partie de l'énergie atteint aussi les cellules saines. Quelques mois plus tard, sur les images IRM de certains patients, apparaissent des taches claires – ce sont des zones où le tissu a été modifié par les radiations. Les médecins les appellent « rehaussements de contraste radio-induits ».
Génomique2026-04-182 minarXiv:2604.18621express
Une loupe quantique pour le cancer du poumon
Deux serrures presque identiques s'ouvrent avec le même passe-partout. Extérieurement, elles se ressemblent, mais le mécanisme intérieur est différent. C'est à peu près le cas des deux principaux types de cancer du poumon non à petites cellules : l'adénocarcinome et le carcinome épidermoïde. Au microscope, on peut les confondre, mais le traitement requis est différent.
Optique2026-04-232 minarXiv:2604.21636express
Les micro-ondes sondent les bords de la tumeur
Le chirurgien retire la tumeur du sein, mais comment savoir si aucune cellule malade ne reste sur les bords ? Actuellement, le tissu est envoyé au laboratoire et la réponse arrive plusieurs jours plus tard. Si la marge n'est pas saine, une seconde opération est nécessaire. La nouvelle méthode promet de donner la réponse directement au bloc opératoire, pendant que la patiente est encore sur la table.
Le cerveau en millisecondes : comment détecter une blessure invisible
Quand un footballeur frappe le ballon de la tête, le cerveau, à l'intérieur du crâne, est légèrement secoué, comme de la gelée dans un pot fermé. Un seul coup ne laisse pas de trace, mais des centaines se répètent au fil des années.
Physique médicale2026-04-241 minarXiv:2604.22666express
L'ultrason ouvre les portes du cerveau
Le cerveau est une forteresse. Il est protégé par une couche dense de cellules qui ne laisse passer que les substances nécessaires. Les médicaments ne peuvent pas franchir cette barrière, c'est pourquoi de nombreuses maladies du cerveau sont si difficiles à traiter. Des scientifiques ont trouvé un moyen d'entrouvrir les portes de la forteresse.
Deux yeux valent mieux qu'un : quand le réseau de neurones apprend à voir la tumeur
Le médecin scrute l'image du cerveau : quelque part dans l'enchevêtrement des tissus se cache une tumeur. Un regard saisit les petites taches et les contours, l'autre la forme générale et l'emplacement. L'humain combine les deux, mais sur des centaines d'images, c'est épuisant. Le nouveau programme fait la même chose automatiquement.
Génomique2026-04-262 minarXiv:2604.23679express
Cancer de la langue : quand l'image révèle la nature de la tumeur
Une tumeur de la langue, c'est un peu comme un inconnu dans la foule. En apparence, tout le monde se ressemble, mais sous la surface se cachent des personnalités très différentes. Certaines tumeurs se comportent de manière agressive, d'autres croissent lentement. Pour les médecins, il est crucial de savoir à qui ils ont affaire avant même l'opération.
Physique médicale2026-04-272 minarXiv:2604.24417express
Des électrons à la vitesse de la lumière contre les tumeurs du cerveau
Un tuyau d'arrosage projette un jet fin et puissant. En le déplaçant sur le jardin, on peut arroser tout le potager sans inonder les allées. C'est à peu près ainsi que fonctionne la nouvelle approche pour traiter les tumeurs profondes : au lieu d'un large flux de rayonnement, on utilise un faisceau étroit d'électrons accélérés à une vitesse proche de celle de la lumière, et on balaie la tumeur avec, comme avec un…
La protéine de l'oubli : comment les maths traquent l'ennemi invisible
La moisissure sur le pain : aujourd'hui une petite tache, demain la moitié de la miche. C'est à peu près ainsi que se propage dans le cerveau la bêta-amyloïde — une protéine collante qui, dans la maladie d'Alzheimer, s'agglutine en amas et perturbe le fonctionnement des neurones.
Comment le cerveau évacue ses déchets : la carte des courants
Imaginez une rivière qui ne coule pas dans un lit ouvert mais à l'intérieur d'une éponge, avec un courant qui change d'un endroit à l'autre : c'est un peu le système glymphatique du cerveau. C'est un réseau de canaux minuscules autour des vaisseaux sanguins, dans lequel le liquide céphalo-rachidien s'infiltre en profondeur dans les tissus et emporte les déchets accumulés pendant la journée.
Physique médicale2026-05-032 minarXiv:2605.01918express
Échange d'eau dans les tumeurs : ce que l'IRM peut révéler
Imaginez un parc aquatique avec de nombreuses piscines reliées par des passages étroits. Les visiteurs – les molécules d'eau – barbotent dans chaque bassin, mais de temps en temps, ils passent dans le bassin voisin. Dans une tumeur cérébrale, ces « passages » sont des canaux protéiques dans les membranes des cellules.
Traitement du signal2026-05-201 minarXiv:2605.21350express
Un radar au lieu d'un scanner : comment les antennes détectent les tumeurs
Quand il faut observer l'intérieur du cerveau, on allonge généralement le patient dans le tube exigu d'un appareil d'imagerie par résonance magnétique, ou on l'expose aux rayons X d'un scanner. Ces deux méthodes sont coûteuses, encombrantes et pas toujours disponibles.
Pourquoi la main tremble et les jambes ne veulent plus avancer
Chez une personne, la maladie commence par un tremblement de la main — la tasse danse sur la soucoupe pendant qu'il la porte vers la table. Chez une autre, les jambes refusent soudain de marcher droit : le pas devient court, traînant, comme si le sol était recouvert d'une couche collante. Ce ne sont pas deux maladies différentes, mais deux visages d'une même maladie — la maladie de Parkinson.
Comment un jumeau numérique sauve un cerveau en quelques minutes
Un plombier débouche un tuyau étroit et sinueux — au toucher, sans voir l'intérieur. C'est à peu près ce que ressent un chirurgien lors d'une thrombectomie mécanique (l'opération qui consiste à retirer un caillot de sang d'un vaisseau cérébral). Le temps presse, et chaque mouvement peut soit sauver la personne, soit endommager la paroi du vaisseau.
Physique médicale2026-06-051 minarXiv:2606.07851express
Quand le silence d'un test en dit plus que les chiffres
Quand le canari s'arrête de chanter dans la mine, les mineurs comprennent : le gaz est déjà là, il faut remonter. C'est à peu près ce que fait l'ADN tumoral qui flotte dans le sang. Le médicament écrase le cancer, et le niveau de cet ADN chute presque à zéro. L'analyse ne le voit plus. Le médecin voit « propre » et se rassure. Mais le silence peut être trompeur.
Physique médicale2026-06-191 minarXiv:2606.21336express
Une boussole magnétique pour le cerveau, sans parasites
L'aimant puissant de l'IRM induit de faibles courants électriques dans les tissus. Leur phase se comporte comme l'aiguille d'une boussole qui tremble au moindre coup de vent : la moindre perturbation transforme la carte en un rideau de parasites, où l'on ne distingue plus que du bruit au lieu des petits vaisseaux ou des dépôts de fer.
Physique quantique2026-06-251 minarXiv:2606.27411express
Le compresseur quantique : une nouvelle façon de détecter les tumeurs cérébrales
Un chef met des années à affiner son art de réduire une recette à trois ou quatre ingrédients essentiels, puis de reconstituer le plat à partir de ceux-ci. Si la composition est connue, on obtient le repas attendu. Un ingrédient étranger perturbe la compression, et le résultat est incompréhensible. Le compresseur quantique fait de même avec les images médicales.
Physique médicale2026-07-102 minarXiv:2607.09401express
Quand les parois des vaisseaux faussent l'image
Dans la substance blanche du cerveau, le signal circule le long des axones – de longs prolongements de neurones enveloppés dans une gaine de myéline isolante. L'eau remplit l'espace à l'intérieur des axones et à l'extérieur, dans les interstices étroits entre les fibres.