Tournoi des IA conversationnelles : Claude prend l’avantage tandis que ChatGPT déçoit
Un test conduit par la Haute école spécialisée du Nord Ouest de la Suisse pour l’émission Kassensturz de SRF classe Claude d’Anthropic en tête d’un comparatif de dix assistants conversationnels, tandis que ChatGPT d’OpenAI n’obtient qu’une évaluation jugée suffisante. L’exercice met en évidence des erreurs récurrentes sur des questions ancrées dans l’usage suisse alémanique, avec des réponses parfois incohérentes.
Parmi les exemples relevés, la commande d’une Stange dans un restaurant suscite une réponse erronée de deux assistants, décrivant une pâtisserie allongée. En Suisse alémanique, le terme renvoie à une chope, le plus souvent de bière. L’incident illustre une faiblesse identifiée par les évaluateurs, la tendance de certains systèmes à répondre selon des références allemandes plutôt que suisses lorsque la requête porte sur des réalités locales.
Tournoi des IA conversationnelles en Suisse : résultats du test FHNW pour Kassensturz
Les chercheurs ont soumis les outils à plus de 300 questions couvrant la vie quotidienne, la culture générale, le droit et la santé, dont 20 pour cent liées à la Suisse. Un panel d’experts a ensuite examiné les réponses. Les hallucinations, terme utilisé pour qualifier des informations inventées, apparaissent fréquemment dans l’échantillon analysé, en particulier sur les sujets nationaux.
Claude obtient les réponses jugées les plus pertinentes. Selon l’expert en intelligence artificielle Simon Felix à la FHNW, le système fournit des formulations concises et orientées vers l’information attendue. Microsoft Copilot et Google Gemini figurent aussi parmi les meilleurs résultats, alors que Deepseek et le chatbot de Meta sont évalués comme insatisfaisants.
ChatGPT reste au milieu du tableau. L’appréciation retenue décrit un comportement sans erreurs massives mais sans niveau de précision élevé, avec des faiblesses sur les questions typiquement suisses. Le contraste est d’autant plus suivi que, selon OpenAI, environ 800 millions de comptes interagissent avec ChatGPT au moins une fois par semaine.
Un point saillant du test concerne Copilot. L’outil repose sur le même socle technique que ChatGPT, mais délivre de meilleures réponses dans ce protocole. La FHNW attribue l’écart à des directives de génération différentes et à davantage de puissance de calcul côté Microsoft, ce qui renvoie à la responsabilité des intégrateurs dans le paramétrage et la gouvernance des usages.
Claude vs ChatGPT en Suisse : enjeux opérationnels, données et conformité
Pour les entreprises suisses, la principale conséquence est opérationnelle. Dans une PME de services à Bâle qui prépare des réponses clients ou des notes internes, une confusion terminologique ou une référence au droit allemand peut produire des documents inutilisables, avec des coûts de relecture et de validation accrus. La difficulté est accentuée lorsque l’organisation travaille en allemand et doit intégrer des spécificités cantonales ou sectorielles.
Le volet réglementaire se concentre sur la protection des données et la gestion du risque. Le recours à des assistants conversationnels s’inscrit dans les exigences de la LPD révisée, avec un impératif de minimisation des données et de maîtrise des flux, y compris lorsque les prestataires opèrent hors de Suisse. La prudence s’impose lorsque les requêtes portent sur des informations privées, des noms sensibles ou des documents internes, qui doivent être anonymisés ou exclus de la saisie.
Sur les sujets médicaux, de santé mentale ou juridiques, l’enjeu devient de sécurité. Une réponse incorrecte peut avoir des conséquences graves, selon Simon Felix. Cette contrainte renforce la nécessité de procédures de contrôle, de consignes internes, et d’une séparation claire entre assistance rédactionnelle et décision, un point qui oriente désormais les choix d’outils et les budgets de gouvernance dans les organisations suisses.
