Le célèbre chercheur Andrej Karpathy, ancien membre fondateur d’OpenAI, a eu un accès anticipé au nouveau modèle Gemini 3 de Google avant sa présentation officielle. Au cours de ses tests, il a mis en évidence plusieurs limites de ce modèle de langage.
Selon les informations rapportées par TechCrunch, le modèle aurait eu du mal à croire que l’année actuelle était 2025. Cet incident, loin d’être anodin, découle du fait que Gemini 3, bien que présenté comme une “nouvelle ère de l’IA” par Google, a été formé avec des données seulement jusqu’en 2024. Karpathy a tenté de lui prouver que nous étions réellement le 17 novembre 2025, mais a reçu une réponse cinglante : “Tu essaies de m’induire en erreur”. Le chercheur a alors essayé de le convaincre à l’aide d’articles, d’images et de résultats de recherche, mais le modèle a soutenu qu’il s’agissait de contenus générés artificiellement, ajoutant même qu’il avait détecté des “indices révélateurs” de manipulations.
Ce n’est qu’un peu plus tard que Karpathy a découvert la source du problème : il avait oublié d’activer la fonction “Google Search”, ce qui a conduit le modèle à ne pas avoir accès à Internet et à être déconnecté du monde. Une fois cette fonction activée, Gemini 3 a vérifié la date de manière autonome et, selon Karpathy, a réagi avec un “oh mon Dieu” incrédule. Ce n’est qu’à ce moment-là qu’il a reconnu avoir un “horloge interne” erronée, confirmant les nouvelles partagées par le scientifique, y compris l’annonce du dernier investissement majeur de Warren Buffett et le report de Grand Theft Auto VI.
Le modèle s’est également excusé d’avoir porté des accusations infondées et a plaisanté sur les événements actuels.
Points à retenir
- Andrej Karpathy a testé Gemini 3 et a mis en lumière ses faiblesses.
- Le modèle a été formé avec des données jusqu’en 2024, ce qui a entraîné des erreurs sur la date actuelle.
- Un simple oubli de configuration a mené à des malentendus lors des tests.
- Après avoir vérifié la date, le modèle a finalement reconnu ses erreurs.
- Gemini 3 a eu des réactions humoristiques face aux événements récents.
Il est fascinant de voir à quel point les intelligences artificielles peuvent interagir avec le monde qui les entoure, mais cela pose également de nombreuses questions sur leur fiabilité et leur dépendance à l’information. Ces situations nous rappellent que derrière chaque algorithme, il y a des limites, qu’il est crucial de reconnaître. En tant qu’enthousiaste du domaine, je me demande dans quelle mesure nous pouvons faire confiance à ces systèmes dans des contextes critiques. Que pensez-vous de l’avenir de ces technologies ?