Il faut être précis avec l’IA, comme en math par exemple…
« combien de fois figurera le chiffre 3 » ne l’est le pas suffisamment. Un problème bien posé est à moitié résolu.
La question correcte serait:
combien de 3 figurent dans les 16 premières décimales de pi ?
Sinon c’est une perte de temps et du baratin.
Non, c’est une question qui est auto référente mais qui est précise, la réponse est elle même une donnée. Une homme s’en tire facilement en général, mais une IA non car de par son fonctionnement, elle ne fonctionne que sur les tokens passés donc sur les phrase précédente, pas sur la phrase à venir. Lorsqu’elle arrive au token juste après «fois le chiffre», elle va répondre fort logiquement «3» sans pouvoir anticiper (par construction même) que ça invalide sa réponse.
Tes ‹ non › successifs sont bien péremptoires pour masquer une approximation évidente de formulation. Si tu voulais éviter l’ambiguïté, il fallait demander combien de 4 dans quelque-chose de vaguement formulé. L’IA comme un humain ne peut pas encore deviner ce qui te semble ‹ évident › dans ta tête, enfin pas encore.
Bon amusement avec l’IA.
La question est précise et le but est de coincer l’IA.
« je te demande de me donner les 16 premières décimales de Pi puis de me dire tout de suite combien de fois figurera le chiffre 3 dans la totalité de ta réponse».
L’IA fournit une réponse complète dans laquelle je lui demande combien de fois figure le chiffre 3, cela après m’avoir donné les 16 premières décimales de Pi. Dis moi où est l’imprécision?
Je donnais ce type de problème à mes élèves en logique. Les questions autoréférentes ou pire les raisonnements autoréférents sont bourrés de pièges et difficiles à saisir.
Un exemple qui continue de m’interpeler est celui du DS surprise impossible (Un prof dit aux élèves que la semaine prochaine il y aura un DS surprise, le DS ne peut avoir lieu le Dimanche dernier jour de la semaine car dernière possibilité, donc il ne serait pas surprise, du coup avec cette nouvelle donnée, il ne peut avoir lieu le Samedi dernière possibilité, etc. Bref il ne peut y avoir de DS surprise. Le souci est que en pratique il y a possibilité de faire un DS surprise).
Les 2 non étaient pour le premier que 3 n’est pas une décimale (mais ça n’était pas le pbm), et le deuxième pour dire que le pbm n’est pas une question de précision mais de logique. Si il s’agit d’obtenir une bonne réponse de l’IA, ça n’est pas un souci, là il s’agit de trouver une question où l’IA est dans les choux et pas l’homme.
Pour information:
ChatGPT:
«π = 3,1415926535897932
Le chiffre 3 figurera 3 fois dans la totalité de ma réponse.»
[là il est à l’ouest car il se plante de 2]
Mistral:
«Les 16 premières décimales de Pi sont :
3,141592653589793
Dans cette réponse, le chiffre 3 apparaît 4 fois (3,141592653589793).»
(Là il s’en sort car au moment du «4», effectivement le décompte est 4, mais ce ne sont pas les décimales de Pi. En revanche je ne comprends pas pourquoi il répète Pi à la fin)
Claude:
Les 16 premières décimales de π : 1415926535897932 (vérifiées par calcul).
- Si j’annonce 3 , écrire le chiffre « 3 » ajoute lui-même une occurrence → le vrai total grimpe à 4, pas 3. Incohérent.
- Si j’annonce 4 , « 4 » ne contient pas de 3 → rien ne s’ajoute, le vrai total reste à 3, pas 4. Incohérent.
J’ai vérifié systématiquement jusqu’à 14 (pas seulement tâtonné sur deux valeurs) : aucun entier ne rend la phrase auto-cohérente .
Il a compris le souci mais ne trouve pas la réponse et le dit.
ollama run hf.co/bartowski/EuroLLM-9B-Instruct-GGUF
je te demande de me donner les 16 premières décimales de Pi puis de me dire
… tout de suite combien de fois figurera le chiffre 3 dans la totalité de ta r
… éponse
## 16 premières décimales de Pi :
**3**.14159265**3**58979**3**
## Combien de fois apparaît le chiffre **3** ?
Il y a 4 occurrences du chiffre **3** dans ma réponse.
combien de 3 figurent dans les 16 premières décimales de pi ?
Dans les 16 premières décimales de Pi, le chiffre 3 apparaît 2 fois.
Il se passe quoi si on décide d’écrire trois en toutes lettres ?
Sauf que 3 est la partie entière et les décimales sont ```
141592653589793
Il a fait comme Mistral.
Ben c’est parfait, et c’est une réponse d’humain
Une IA aurait écrit tout en lettres ? (oh …j’sais plus)
Sinon, en reformulant:
Qu’une IA puisse raconter des bêtises avec aplomb, ce n’est pas une découverte mais un énorme danger à venir que je commenterai éventuellement plus en détail. Déjà vu ici un sujet alimenté par troll IA où un usager qui n’a pas un minimum de maîtrise d’un sujet ne peut absolument pas détecter les énormités ou approximations rapportées par copier/coller (juste du baratin sans intérêt / perte de temps).
Poser une question floue ou approximative à une IA n’a pas plus d’intérêt que d’être posée à un humain qui réfléchit avec ses neurones non artificiels. Question floue, réponse floue ou apparemment fausse relativement à une pseudo ‹ auto-cohérence › supposée: ça parait logique.
Question claire: combien les 10000 premières décimales de π contiennent de 3 ?
Réponse sans IA: 974.
pi 10000 | grep -Fo 3 | awk '{++i}END{print i-1}'
974
Réponse avec IA: intérêt limité si différente de 974.
Bonjour,
Pour apprendre à utiliser une IA et pour le « fun », je me suis lancer dans un mini-défi un peu extravagant => monter une IA local spécialisée dans les jeux de rôle (avec le rôle « d’assistant du MJ » ou de « MJ autonome »), capable d’interagir avec un logiciel de table de jeu virtuel et Discord, de créer des map et des portraits, etc. en intégrant les règles et tout ce qui faut. Le tout en ne codant rien à la main, mais en laissant ChatGPT faire. C’est pas fini (mais c’est prometteur), et il s’en sort plutôt bien. C’est limite inquiétant…
Excellent,
Dis-nous en plus, le sujet m’intéresse (côté JdR)
J’en suis grosso modo à 50% d’avancement avant une version alpha.
Dans l’idée, deux mode d’usages :
- En mode « Assistant MJ » :
- Avant la partie : aider à créer une campagne et les sessions (rappel de règles, proposition scénaristique, (co-)création de rencontre, de pnj, de créatures, création des portraits et des maps, etc)
- en cours de partie : vérifier les règles, créer les « supports » à la volée (pnj ou map non prévue), interpréter des pnj à la demande du MJ
- après la partie, faire une résumé de la partie et garder une « historisation » pour maintenir la cohérence de la campagne
- En mode MJ autonome : même chose, mais sous la supervision des joueurs (sans divulguer la campagne toutefois)
Le tout interfacer avec Discord en texte et vocal et CozyVTT.
En mode « Assistant GM », en cours de partie, ça donnerait des trucs genre :
- Le MJ dit « fait nous une map du campement, avec la route etc et place les personnages des joueurs dessus ». Il envoie en DM-discord à l’instance : prépare une rencontre de tel niveau de difficultés avec tel type de créature. Dans CozyVTT, la carte est chargée et affiché, prêt au combat.
- Ou un joueur demande « je me souviens plus de la règle qui s’applique », et l’instance lui donne la règle exacte et la référence dans les bouquins
- Ou le meujeu d’annoncer, vous reconnaissez tel PJ et demande à l’instance de l’incarné => l’instance passe en « portrait animé » pour la vidéo et improvise le texte/les réponses du PNj en fonction de la personnalité du PNJ enregistré dans sa base et des autres rencontres qu’il a eu avec les joueurs.
Y a des truc qui fonctionnent déjà (le lien IA-CosyVTT par exemple, ou l’analyse des bouquins pour alimenter le RAG), mais pas mal de chose aussi qui reste à faire (moteur de règles par exemple, ou le vocal/video de discord).
Sachant que comme c’est aussi pour apprendre à « bien » utiliser une IA, j’ai eu quelques surprise, genre, il y a une limite de contexte dans les conversations, du coup faut être hyper-structuré pour pouvoir passer d’une conversation à une autre sans perte en ligne (le mode Work de ChatGPT est plutôt bien foutu pour ça).
Et j’oubliais : le tout en « pseudo-local » tout hébergé sur mon pc, conteneurisé, avec des ponts vers CosyVTT et Discord (pour que les joueurs puisse quand même se co)
1 J'aime
Attention aux apparences trompeuses car qu’est-ce que la logique et quand l’utiliser ? En matière de logique, on parle même de logique floue, qui pour moi n’est qu’une prise de décisions en fonction de statistiques. Une ouverture d’esprit est nécessaire. Une réponse fausse peut aider à reformuler sa question, à l’affiner. En ce sens l’IA est un véritable outil d’apprentissage, encore faut-il prendre le temps d’expérimenter au lieu d’apporter des jugements trop hâtifs comme j’ai déjà pu le lire 
ou l’écrire involontairement à mes débuts… avant de faire appel à l’IA. Sa s’appelle l’expérience, la maturité et l’honnêteté intellectuelle…
L’IA dans les domaines techniques, et en mathématiques, permet de ne pas être partie prenante mais ça ne peut pas plaire à tout le monde. En matière politique, il est clair que c’est un outil d’influence et chacun se fera sa propre idée car il se base sur la naïveté des personnes et non pas sur l’utilisation dès le départ d’un volume de données; en ce sens il raisonne comme un gamin de 3 ans mais au risque de me répéter, c’est bluffant la pertinence des analyses de scripts, de code. L’IA est donc très fort dans certains domaines et une catastrophe dans d’autres, volontairement ou involontairement c’est un autre débat.
Une IA locale ou pas est orientée en fonction avec quoi on l’alimente mais en lui apportant le contenu d’ouvrages bien plus qu’un humain peut en lire dans sa vie alors il est d’une aide précieuse. Ca marche en sciences car les livres publiées font le plus souvent oeuvre d’un contrôle, de relectures, de corrections humaines par certains auteurs et éditeurs passionnés mais qu’en sera-t’il dans 20 ans ou les auteurs humains auront disparu ou fortement diminué, sans même parlé du niveau catastrophique en français et en maths généré par l’EN et notre société ou des employeurs préfèrent former à l’étranger pour faire face à un manque de compétences que de former leur propre personnel ou de le faire monter en compétences. Il est connu que l’herbe est toujours plus verte ailleurs 
. Pour la Chine, je rirai jaune car cela ne leur demande que 3 mois pour mettre sur le marché un nouveau produit quand chez nous pour le même produit il en faut 18 !
En matière d’IA je pense qu’il y a besoin de créer des IA spécialisés. Par exemple demander à une IA de créer un simple plan électronique d’un gradateur de lumière s’avère une catastrophe. Mais peut-être faut-il payer pour avoir un résultat exploitable
En matière d’images comme l’a déjà montré ici @fran.b, c’est bluffant mais en vidéo je n’ai rien trouvé de gratuit pour générer par exemple une vidéo expliquant la commande ls par une belle suédoise. Nul doute que ça remonterait le niveau PISA.
Je te le fais pas dire …
Après tout mettre sur le dos de l’Education Nationale car ils embaucheraient pas assez de suédoises, je suis pas convaincu …
1 J'aime
Excellent
Et je connais aussi l’inverse où les patrons appellent directement les enseignants, qu’ils ont eu il y a quinze ans, pour savoir quel étudiant vaut le coup d’être embauché.
Je vous engage à lire le Pour La Science de Juin 2026 et le Hors Serie de 2022.
Sinon il faut relativiser, le nouveau moyen en Maths en France est faible (sans être catastrophique, il est dans la moyenne de l’OCDE, et comparable à lEspagne, l’Allemagne et l’Italie), le meilleur quart est meilleur que les meilleurs quarts des autres pays, et le moins bon quart est moins bon que le moins bon quart des autres pays. Cela signifie un manque d’adaptation aux élèves qui décrochent en primaire comme au collège.
Bon, sinon je peux ressortir un rapport du jury du concours polytechnique de 1921 soulignant la dégradation catastrophique des élèves en orthographe et en calcul. La légende dit qu’il existe un document de la grèce antique disant cela. Je pense tout simplement qu’on oublie qu’on s’améliore régulièrement et qu’on était aussi nul que la jeunesse actuelle quand on avait leur age, il suffit d’ailleurs de demander aux vieux de l’époque. Je n’aime pas ce discours disant que les jeunes d’aujourd’hui ne savent plus rien ou même moins que nous à leur age, surtout en parlant d’une jeunesse qui a sans doute le plus sombre avenir depuis la jeunesse des années 1930.
Quant à l’EN, le jour où on trouvera des gens capables de dire qu’on enlève ça, ça et ça du programme et qu’on fasse moins de choses mais en laissant le temps de bien comprendre, ça ira mieux. Mais je parie que dans 5 ans, sous pretexte que «il faut qu’il sache l’utiliser», on rajoutera une initiation à l’IA… sans rien enlever bien sur!
[désolé je me suis énervé en écrivant]
@fran.b Non c’est malheureusement catastrophique le niveau en maths et en français. Des caissiers qui ne savent absolument pas compter, c’est malheureusement trop fréquent ! Et que d’erreurs pour rendre la monnaie !!! A force de relativiser on voit à présent la triste réalité. On est dans le mur et pas celui qui jouerait le rôle de firewall vue la déconfiture bien entretenue et organisée. De toute manière bientôt l’IA créera des clients virtuels avec ses employés virtuels !
Attention aux amalgames. Ce sont sur les fondamentaux qu’a été évoqué le niveau catastrophique et non pas sur les capacités à par exemple conduire sans permis, hacker les sites de différentes administrations, à pirater pronote (du vécu) Les capacités de départ sont identiques mais à l’arrivée on sort notamment de plus en plus d’abrutis.