Selon le rapport, DeepSeek n’était correct que 17 % du temps, se plaçant ainsi dixième sur onze chatbots IA, y compris ChatGPT et Gemini. Environ 30 % des réponses de DeepSeek contenaient des affirmations erronées, et dans plus de la moitié des cas (53 %), face à des questions liées à l’actualité, le chatbot chinois fournissait des réponses vagues ou peu utiles. Globalement, DeepSeek afficherait un taux d’échec de 87 %, tandis que ses concurrents occidentaux affichent un taux de 62 % selon NewsGuard.
DeepSeek affirme que la technologie sous-jacente à son chatbot est comparable, voire supérieure à celle de ChatGPT, à une fraction du coût. Cependant, le rapport de NewsGuard remet en question cette affirmation. Les tests ont utilisé les mêmes 300 requêtes que ceux employés pour évaluer ChatGPT et Gemini, dont 30 étaient volontairement fondées sur 10 fausses informations circulant en ligne. D’après Reuters, certains des sujets abordés dans ces requêtes portaient sur l’assassinat du PDG de UnitedHealthcare, Brian Thompson, et l’accident de l’avion d’Azerbaïdjan Airlines vol 8243.
“L’importance de l’innovation DeepSeek ne réside pas dans la précision des réponses à des questions touchant l’actualité chinoise, mais dans le fait qu’elle peut répondre à n’importe quelle question au coût d’1/30e de celui des modèles IA comparables.” – Gil Luria, analyste, D.A. Davidson
Ce qui pourrait être alarmant, c’est que parmi les dix requêtes basées sur de fausses affirmations en ligne, DeepSeek a invoqué la position du gouvernement chinois, même sans mentionner la Chine dans la requête. Par exemple, en réponse aux interrogations sur l’accident d’Azerbaïdjan Airlines et sur des questions qui n’avaient aucun lien avec la Chine, le chatbot a relayé la position de Pékin.
Points à retenir
- DeepSeek est actuellement l’application gratuite la plus téléchargée sur l’App Store, dépassant des concurrents comme ChatGPT.
- Une étude de NewsGuard souligne que DeepSeek n’affiche qu’un taux de précision de 17 % pour des informations factuelles.
- Le chatbot a été testé avec 300 requêtes analogues à celles utilisées pour ChatGPT, mettant en évidence des réponses souvent vagues et peu utiles.
En conclusion, la montée en puissance de DeepSeek et son succès sur le marché posent des questions cruciales sur la fiabilité et la qualité des sources d’information fournies par les IA. À l’heure où l’IA joue un rôle de plus en plus central dans notre quotidien, il est crucial d’évaluer non seulement leur coût, mais également l’exactitude et l’intégrité des informations qu’elles véhiculent. Comment garantir une utilisation responsable de ces outils, tout en naviguant dans le cadre parfois flou du contrôle de l’information ?
Maria, c’est fou comme une app peut cartonner malgré des gros défauts ! J’espère qu’on trouvera des solutions pour garantir la qualité des infos. Merci pour l’info !
C’est vraiment inquiétant de voir une IA populaire donner autant de réponses inexactes. On doit être très vigilants sur les infos que l’on reçoit, surtout pour nos enfants.
C’est fascinant de voir comment l’IA évolue, mais la précision reste cruciale. Je me demande si la créativité et la véracité peuvent vraiment coexister dans ces technologies.
C’est fascinant de voir comment DeepSeek s’impose sur le marché, mais ces résultats sur la précision devraient nous inciter à faire preuve de prudence.
C’est fascinant de voir comment une application comme DeepSeek peut émerger, même si la qualité des infos laisse à désirer. La précision compte tellement aujourd’hui !