Écrire un article sur la langue française est un exercice périlleux, surtout de ma part. Cependant, une manière amusante de tester les LLMs (aka les IAs) est de leur soumettre des questions, plus ou moins intéressantes, sur la conjugaison ou la grammaire française.

Déjà pour le commun des mortels, c’est un vrai casse-tête: pour un LLM ça peut être le trou noir. Voici la question:

Dans la langue française, y a-t-il un verbe qui se conjugue de la même manière au présent de l’indicatif et à l’imparfait du subjonctif à la première personne du singulier?

Et ceci sans aucun « prompt » particulier avec la fonctionnalité de « chat » de duckduckgo qui permet de tester gratuitement plusieurs fournisseurs de LLMs.

Sauf erreur de ma part, la réponse est non. Mais j’ai l’impression que les LLMs sont programmées pour donner des réponses positives et argumentées.

Claude v3 nous répond ceci:

Cela vaut bien quelques perles du bac. Autre candidat, Llama 3:

J’ai l’impression que ce candidat est parti dans une boucle infinie avant de perdre la tête. Mais de la même manière, GPT-4 parle avant de réfléchir:
Oui, je sais, c’est facile de se moquer des IAs avec l’imparfait du subjonctif, mais moi, je n’ai pas lu tous les textes disponibles depuis l’aube de la langue française. Conclusion, les IAs n’ont pas fait leurs devoirs. Elles sont, actuellement plus douées pour générer du code informatique et c’est très pratique.