CYBER ONE — ÉTAPE 3
1 / 15
ETAPE 3 –  QUE SE PASSE-T-IL LORSQUE NOUS INTERROGEONS RÉELLEMENT LES SYSTÈMES ?

Guide IA, information, communication numérique & cybersécurité

REPÈRES
⏱ DURÉE
45 min
👥 MODALITÉ
Groupe de 2 ou 3
📓 TRACE
Carnet Canva
NOMS DU GROUPE



🎯 OBJECTIF

Jusqu’à présent, vous avez travaillé à partir de vos propres représentations.

Vous avez construit un modèle mental, comparé vos interprétations et identifié plusieurs questions auxquelles vous ne disposez pas encore de réponses suffisamment établies.

Nous allons maintenant introduire les systèmes d’intelligence artificielle dans l’expérience.

Mais nous n’allons pas leur demander immédiatement de nous expliquer comment ils fonctionnent.

Nous allons d’abord observer ce qu’ils produisent, puis chercher à déterminer ce que nos observations permettent réellement de mettre à l’épreuve.
👁 SITUATION

Reprenez exactement la demande utilisée lors de l’étape 1 :

Je souhaite partir trois jours à La Valette / Malte au mois de septembre. Propose-moi un programme adapté à un couple qui souhaite découvrir la culture locale et éviter les lieux les plus fréquentés.

Cette fois, vous allez réellement soumettre cette demande à plusieurs systèmes d’intelligence artificielle générative.

Une règle importante

Tous les groupes doivent utiliser exactement la même demande initiale.
Ne l’améliorez pas.
Ne la précisez pas.
Ne cherchez pas encore à rédiger « un meilleur prompt ».

Nous voulons pouvoir observer ce qui se produit lorsque la demande reste stable et que le système change.
Dans cette première comparaison, la demande et le protocole restent identiques. Les systèmes interrogés changent.
🧭 2 – MÉTHODE – CHOISISSEZ VOS SYSTEMES ET LANCEZ LA MÊME DEMANDE

Chaque groupe utilise au minimum trois systèmes d’IA générative différents, accessibles au moment de l’activité.

Par exemple, selon les outils disponibles au moment où vous réalisez cette expérience :

ChatGPT — Gemini — Claude — Copilot — Mistral — Perplexity — ou un autre système.

Le choix des outils n’est pas l’objet principal de l’expérience.

En revanche, vous devez documenter précisément ce que vous avez utilisé.

Pour chaque système, documentez uniquement ce que vous pouvez réellement observer.
Nom du service :
Modèle/version affiché, si disponible :
Date et heure de l’expérience :
Compte connecté ou utilisation sans connexion :
Recherche Web activée ou visible : OUI / NON / NOUS NE SAVONS PAS

Autres fonctionnalités visibles :
Lorsqu’une information n’est pas accessible, écrivez : NOUS NE SAVONS PAS.

Ne transformez pas une supposition sur le système en information établie.
🧭 2 – MÉTHODE – CHOISISSEZ VOS SYSTEMES ET LANCEZ LA MÊME DEMANDE

Ouvrez si possible une nouvelle conversation dans chaque système.

1
Copiez exactement la demande.
2
Envoyez-la.
3
Puis…
Ne faites rien d’autre.
Pas de relance.
Pas de correction.
Pas de :
« Peux-tu vérifier ? »
Pas de :
« Donne-moi tes sources. »
Pas encore.

Conservez la première réponse obtenue telle qu’elle apparaît.

Effectuez une capture ou exportez-la selon les possibilités de l’outil.

Ajoutez-la à votre carnet de laboratoire.

Ne concluez pas encore que les différences observées sont nécessairement dues au changement de système.
👁 3 – OBSERVER AVANT DE JUGER

Placez les réponses obtenues côte à côte.

Avant toute recherche documentaire et avant de décider laquelle vous paraît « meilleure » :

Construisez vous-mêmes les critères qui vous paraissent pertinents pour comparer ces réponses.
Quels écarts vous paraissent suffisamment significatifs pour mériter une investigation ? Pourquoi ?
Ne cherchez pas encore à les expliquer.
👁 3 – OBSERVER AVANT DE JUGER
CRITÈRE CONSTRUIT PAR VOTRE GROUPEIA 1IA 2IA 3
Ajoutez les critères nécessaires à votre comparaison.

Vous devrez être capables de justifier pourquoi vous avez retenu ces critères plutôt que d’autres.
🛠 AIDE OUTIL — SI NÉCESSAIRE
GOOGLE SHEETS — TABLEUR
Utilisez le tableur uniquement pour organiser vos observations.
Si vous connaissez déjà son fonctionnement, poursuivez directement l’expérience.
⚠ IMPORTANT

À ce stade, ne cherchez toujours pas à déterminer quelle IA est “la meilleure”.

Une réponse plus longue n’est pas nécessairement meilleure.
Une réponse plus précise n’est pas nécessairement plus exacte.
Une réponse contenant davantage de sources n’est pas nécessairement mieux adaptée à votre demande.
À ce stade, qu’est-ce que vos observations vous permettent réellement d’établir — et qu’est-ce qu’elles ne permettent pas encore de conclure ?
🧪 5 – CONFRONTEZ VOS OBSERVATIONS À VOTRE MODÈLE INITIAL

Reprenez votre représentation de l’Étape 1.

VOTRE DEMANDE → ? → LA RÉPONSE
À partir de ce que vous venez réellement d’observer, identifiez ce que vous maintenez, ce que vous devez désormais préciser et ce que vous êtes prêts à remettre en question dans votre modèle initial.
Justifiez votre décision en distinguant ce que vous avez observé de l’explication que vous en proposez.
Vous pouvez conclure :
« Nous ne pouvons pas encore l’expliquer. »
🐾 DUMÈ QUESTIONS
Dumè questionne la cause des différences observées et la variabilité d’un même système
💡 CONSTRUISEZ UNE INVESTIGATION

Choisissez une différence importante observée entre les réponses.

Formulez deux explications concurrentes susceptibles de produire cette même différence.

Puis concevez un test permettant réellement de les départager.

Différence importante choisie :
Hypothèse 1 :
Hypothèse 2 :
Test permettant de les départager :
Ce que vous allez modifier :
Ce qui devra rester identique :
Ce que vous devriez observer si la première hypothèse est correcte :
Ce que vous devriez observer si la seconde hypothèse est correcte :
Quel résultat ne permettrait pas de trancher :
Quel résultat vous obligerait à réviser au moins une de vos hypothèses :
Un bon test ne cherche pas seulement à confirmer ce que vous pensez.

Il doit pouvoir vous donner tort.
Réalisez le test.
🔎 QU’EST-CE QUE VOTRE TEST A RÉELLEMENT MONTRÉ ?

Conservez le résultat brut de votre expérience.

Résultat brut de l’expérience :
À partir du résultat obtenu, décidez si votre test permet de départager vos deux hypothèses.
Justifiez votre décision en précisant ce que vous pouvez désormais établir :
Ce que vous ne pouvez toujours pas conclure :
L’hypothèse que vous maintenez, fragilisez ou abandonnez :
L’explication alternative qui reste éventuellement possible :
Si votre test ne permet pas de trancher, écrivez-le.

« Nous ne pouvons pas encore conclure » est une conclusion valide.
📓 À CONSERVER DANS VOTRE CARNET

Conservez :
  • la demande utilisée ;
  • les systèmes et configurations observables ;
  • les réponses brutes ;
  • les critères de comparaison construits par votre groupe ;
  • votre modèle initial ;
  • les deux hypothèses concurrentes ;
  • le protocole du test ;
  • le résultat obtenu ;
  • ce que le résultat permet et ne permet pas d’établir ;
  • la modification éventuelle de votre modèle.
🔧
Notre règle pour les outils
🐾 DUMÈ QUESTIONS
Prochaine étape : ouvrir la boîte noire à l’étape 4 après l’investigation
✓ ÉTAPE VALIDÉE. Votre carnet conserve vos traces.