UNE EXPÉRIENCE INTÉRESSANTE AVEC l’IA À PROPOS DE MECILDI

Posted on: Last updated on: Written by:

UNE EXPÉRIENCE INTÉRESSANTE AVEC L’IA À PROPOS DE MECILDI

Après l’annonce de MECILDI et de sa publication préliminaire, OBDILCI a mené une expérience avec onze applications d’IA. Plusieurs objectifs ont été fixés pour cette expérience :

  1. Vérifier dans quelle mesure les avancées réalisées par l’OBDILCI en matière de mesure de la présence des langues en ligne se reflètent dans les réponses de l’IA .
  2. Évaluer l’impact potentiel de MECILDI dans ce domaine en demandant aux experts de donner leur avis sur le prépublication et son impact potentiel.
  3. Essayer de « former » scientifiquement les IA dans un domaine dominé par un fournisseur de données extrêmement populaire, mais fortement biaisé.
  4. Évaluer la possibilité que les améliorations apportées par les IA au cours d’une conversation puissent avoir une incidence sur les futures conversations avec d’autres utilisateurs.
  5. Évaluez l’impact du langage conversationnel dans les réponses.

Les résultats de cette expérience sont disponibles (en anglais) ici , avec des liens vers chaque conversation.

Ces progrès sont bien reflétés, dans la moitié des cas dès le départ, mais dans 25 % des IA, ce n’est qu’une fois que la référence à OBDILCI est explicitement mentionnée.

THE CONCLUSIONS

  1. Ces progrès sont bien reflétés, dans la moitié des cas dès le départ, mais dans 25 % des IA, ce n’est qu’une fois que la référence à OBDILCI est explicitement mentionnée.
  2. Toutes les IA s’accordent à dire que MECILDI est un tournant décisif ; une IA va même jusqu’à le qualifier de « échec et mat ».
  3. Le processus éducatif fonctionne bien en opposant les données validées par des pairs à celles qui ne sont pas étayées par des sources.
  4. Toutes les IA sauf une ont prétendu qu’elles répondraient de manière totalement différente à la même question dès maintenant. Le test a démontré que c’était faux. Il subsiste encore certaines zones d’ombre sur cette question, qui semble constituer un enjeu crucial pour l’avenir de l’IA.
  5. Pouvons-nous convaincre une IA à l’aide d’arguments solides et l’amener à passer d’un point de vue fondé sur le consensus populaire à un autre fondé sur des principes scientifiques rigoureux, même s’il est moins populaire ? La réponse est oui, sans aucun doute, et heureusement. C’est pourquoi une utilisation correcte de l’IA nécessite une bonne dose d’esprit critique.
  6. Le changement de langue n’a pas modifié les réponses, à l’exception de CoPilot et DeepSeek. Le cas particulier de DeepSeek et le parti pris massif contre la francophonie qui en est ressorti soulèvent les questions supplémentaires suivantes, dont certaines restent sans réponse.
  7. Ce parti pris anti-francophonie de DeepSeek est-il apparu au cours de cette expérience comme un accident fortuit, ou est-il « programmé » pour se manifester de manière systématique ?
  8. Les autorités chinoises ont-elles une position clairement hostile à l’égard des francophones ?
  9. Ce parti pris anti-francophonie de DeepSeek est-il apparu au cours de cette expérience comme un accident fortuit, ou est-il « programmé » pour se manifester de manière systématique ?