classification d'images

Un interprète lors d'une négociation n'écoute pas chaque mot individuellement : il saisit le sens de phrases entières. En microscopie électronique, le problème est similaire : il faut déterminer l'épaisseur d'un cristal et son inclinaison dans le faisceau, alors qu'on ne dispose que de la figure de diffraction, un motif de milliers de…

La nuit, au sommet d'un volcan, six télescopes observent le même point de lumière. Chacun capture sa propre copie de l'onde, et si l'on combine leurs signaux, on obtient une image qu'aucun instrument seul ne pourrait produire. Mais il y a un piège : la lumière captée par différentes stations ne peut pas simplement être additionnée comme des photographies.

Se perdre dans une salle des glaces est un jeu d'enfant : chaque mur reflète l'autre, et l'on croit être déjà passé par là. C'est à peu près ce qui se passe dans le cerveau lorsqu'il y a beaucoup d'endroits similaires autour de soi. Les neurones chargés de la carte spatiale peuvent envoyer le même signal pour deux coins différents d'une pièce.

La galaxie NGC 4254 se trouve à un million et demi d'années-lumière du centre de l'amas de la Vierge. Elle traîne derrière elle un long filament d'hydrogène en refroidissement – signe qu'elle s'engouffre à pleine vitesse dans le gaz surchauffé.

Quatre faibles traits sur l’image — tout ce que voit l’astronome. Ainsi, un sculpteur restaure la forme d’un verre invisible à partir de quatre ombres.

En assemblant le puzzle de l'Univers, les astronomes ont l'habitude que chaque nouvelle pièce s'emboîte parfaitement dans le tableau déjà constitué. Mais parfois, ils tombent sur des morceaux qui semblent découpés dans un autre jeu. Vingt mille noyau actif de galaxie — et onze pour cent d'entre eux, le réseau de neurones les rejette résolument comme étrangers.

Le fond optique du ciel est un palimpseste cosmique, où la lumière de milliards de galaxies non résolues s'empile en couches correspondant à différentes époques. Jusqu'ici, nous ne distinguions que les « lettres » les plus brillantes — les étoiles individuelles et les galaxies proches.

Un radar ordinaire ne voit qu'un point. La nouvelle méthode transforme l'écho radio en une sculpture en volume : le signal dessine la forme, l'inclinaison et le mouvement.

Les signaux radio dans une pièce se comportent comme le son dans une salle de concert : en se réfléchissant sur les murs et les objets, ils créent une empreinte unique — la mélodie silencieuse de chaque lieu. Le téléphone, telle une oreille attentive, capte cette mélodie dans le bruit et les distorsions. Il mémorise quel accord correspond au coin du canapé, et lequel à l'embrasure de la porte.

La caméra à pixel unique évoque un artiste qui peint à travers un pochoir percé de nombreux trous. Chaque prise de vue ne laisse passer qu'une partie du flux lumineux, puis l'ordinateur assemble ces fragments pour reconstituer une image complète. Autrefois, l'ordre des masques était immuable, comme si l'artiste utilisait toujours le même pochoir sans jamais regarder son sujet.

Un enfant qui explore un appartement inconnu rampe d'un objet à l'autre et mémorise ce qu'il voit depuis chaque coin. C'est ainsi que le cerveau construit une carte mentale — un modèle interne de l'espace. L'algorithme gradCSCG fonctionne sur le même principe : il reçoit un flux vidéo d'une caméra et dessine lui-même le plan du lieu, en s'appuyant uniquement sur le changement des images.

Les images médicales sont des cartes de densité des tissus. La luminosité de chaque point indique ce qui se trouve à cet endroit, un peu comme la photométrie mesure l'intensité de la lumière. Mais les algorithmes habituels analysent les points individuellement, ce qui donne des contours d'organes irréguliers.

Des chercheurs ont pris 16 activités quotidiennes — de la vaisselle aux squats — et ont décomposé les mouvements en composantes élémentaires, un peu comme un spectroscope décompose la lumière en spectre. En comparant trois approches, ils ont trouvé une clé inattendue pour la reconnaissance : une simple image moyenne suffit.

Plongez votre regard dans le ciel nocturne : ce n'est pas un semis d'étoiles, mais un manuscrit à plusieurs couches. Sous l'encre brillante des étoiles et des galaxies transparaît un texte pâle, presque effacé.

Depuis qu'Einstein a prédit la lentille gravitationnelle et que les ondes gravitationnelles ont été entendues pour la première fois par les détecteurs LIGO, les physiciens rêvent de capturer un écho lentillé — un signal répété d'une même fusion, multiplié par la…

Près d'un siècle après que Fritz Zwicky a soupçonné quelque chose d'anormal dans le mouvement des galaxies de l'amas de la Chevelure de Bérénice, et que Vera Rubin a mesuré les vitesses stellaires dans les bras spiraux, la nature de la matière noire reste l'une des énigmes les plus lancinantes.

Les ingénieurs fabriquent un alliage pour les concentrateurs solaires en y ajoutant des particules dures — comme des raisins secs dans une pâte, pour qu'elle garde sa forme sous une chaleur extrême. Des raisins trop gros, et le matériau fissure. Avant, les scientifiques les comptaient manuellement sur des images de microscope.

Imaginez qu'un éditeur de photos ordinaire sache détourer des objets sur une image, tandis que le réseau de neurones ZooBot:3D traite les galaxies lointaines comme un cartographe qui dresse la carte d'une terre inconnue.

L'espace-temps est souvent imaginé comme un tissu lisse. Mais à l'échelle microscopique, ce tissu pourrait ne pas être continu, mais constitué d'« atomes » individuels — des événements reliés par la causalité. Cette vision du monde s'appelle la théorie des ensembles causaux.

Un peintre fait un portrait coup de pinceau après coup de pinceau, puis on lui propose un appareil photo avec flash : un clic, et c'est fait. C'est à peu près la transition entre les modèles multi-étapes et les modèles en une étape pour la création d'images de galaxies.

Vous goûtez un plat au restaurant, mais vous n'avez pas vu le menu. Vous posez des questions au serveur — trop salé ? avec quelles épices ? — et à partir des réponses, vous essayez de deviner quel chef l'a préparé.

Un biologiste observe au microscope des dizaines de minuscules sphères cellulaires – des sphéroïdes. À partir d'eux, de minuscules organes miniatures pousseront plus tard. La tâche ressemble à celle d'un boulanger qui évalue si la pâte a bien levé dans chaque moule. Seulement, au lieu de moules, il y a un milieu de culture, et au lieu de pâte, des cellules vivantes.

Les astronomes repèrent parfois des objets interstellaires – des blocs de roche ou des comètes venus d'autres systèmes stellaires. La plupart semblent banals, mais certains intriguent par leur forme, leur vitesse ou leur éclat.

Plan d'une ville : les intersections sont les nœuds, les rues les connexions. Pour que l'algorithme comprenne la structure, chaque nœud doit être étiqueté. L'approche classique — modèle standard — attribue des étiquettes simples, comme des numéros de maisons.

Un grain de beauté sur la peau ressemble à une mosaïque de morceaux colorés. Chaque morceau est une petite zone de l'image où la couleur et la texture ne changent presque pas. On appelle ces morceaux des superpixels. Si on les relie par des lignes, on obtient un réseau semblable à un plan de métro : les stations sont les morceaux, et les lignes sont les connexions entre eux.

Une galaxie n'est pas qu'un simple semis d'étoiles. Au centre de beaucoup d'entre elles brûle quelque chose de plus brillant que des milliards de soleils : un gaz surchauffé qui tombe dans un trou noir.

L'électrocardiogramme n'est pas qu'une ligne ondulée sur du papier. Comme un journal intime, il consigne l'état de tout le cœur : le rythme, l'épaisseur des parois, et les indices de problèmes futurs. Mais aujourd'hui, les programmes qui apprennent à lire ce journal sont entraînés sur des tâches très étroites — principalement la recherche de troubles du rythme.

Un film magnétique, découpé en minuscules cellules-flèches, se comporte comme une foule sur une place. Tant qu'il fait froid, toutes les flèches pointent dans la même direction — un ordre parfait. Chauffez le film, et les flèches se mettent à s'agiter, comme des passants qui ont perdu leur but.

Le spectromètre de masse fonctionne comme un broyeur à molécules : il décompose la substance en fragments chargés et pèse chacun d'eux. Grâce à cette « empreinte », les chimistes déterminent ce que contient l'échantillon. Mais si la molécule est nouvelle et que ses fragments ne correspondent à rien de connu, l'appareil ne montre qu'une série de pics — et ce qui se cache derrière reste opaque.

Un ornithologue dans la jungle entend un trille, mais l'oiseau se cache dans le feuillage. Il aimerait bien obtenir son portrait sur-le-champ — ne serait-ce qu'à partir d'une base de photos. D'habitude, il faut pour cela des milliers de paires « enregistrement du chant + photo du même oiseau », et les collecter coûte cher et prend du temps.

Un télescope à rayons X en orbite a enregistré pendant des années la lueur des systèmes binaires où une étoile ordinaire tourne autour d'un trou noir ou d'une étoile à neutrons. La matière de l'étoile compagne tombe sur l'objet compact, s'échauffe à des millions de degrés et émet des rayons X.

Un amas de galaxies, par son attraction, courbe l'espace-temps, agissant comme une lentille géante : elle focalise et amplifie la lumière d'objets lointains, comme l'avait prédit Einstein. De telles lentilles sont rares, mais elles permettent d'observer ce qui se cache aux confins du cosmos.

Deux graphes sont considérés comme identiques si leur « relief » correspond. Deux cartes avec des montagnes et des vallées : même si le dessin diffère, les hauteurs et les pentes peuvent être les mêmes.

L'électrocardiogramme ressemble à une partition où chaque note est un battement de cœur. Le médecin entend la mélodie et repère les fausses notes — l'arythmie. Mais écouter la partition pendant des heures est épuisant, c'est pourquoi on place un capteur intelligent au chevet du patient.

Les photons intriqués sont comme des jumeaux : agir sur l'un affecte instantanément l'autre, même s'ils sont séparés par des kilomètres. Jusqu'à récemment, observer un tel lien nécessitait des détecteurs comptant chaque photon individuellement dans l'obscurité totale.

D'habitude, pour comprendre un état quantique de la lumière, il faut effectuer des dizaines de mesures complexes — comme si l'on devait essayer toutes les clés d'un trousseau. Le nouveau modèle d'IA fonctionne autrement : c'est une clé universelle qui, après un léger ajustement, ouvre de nombreuses « serrures » — des états simples aux plus retors.

Les astronomes lisent l'histoire des galaxies à travers leurs portraits. Autrefois, ils utilisaient soit la longue analyse de la lumière par couleurs, soit les rapides photos avec filtres, perdant les détails de la forme.

Deux clichés du même endroit : l'un pris le matin par un drone, l'autre le soir par un satellite. Sur le premier, des ombres d'arbres ; sur le second, des reflets sur l'eau. C'est comme deux récits d'un même événement dans des dialectes différents : les mots se ressemblent, mais la grammaire diffère.