{
  "verdict": "VALIDÉ",
  "n_total": 117,
  "n_target": 120,
  "spearman_global": 0.8644,
  "p_value": 3.9563806915687356e-36,
  "spearman_avg_per_question": 0.8607,
  "kimi_empty_questions": [
    "Q2",
    "Q9",
    "Q19"
  ],
  "borda": [
    {
      "rank": 1,
      "model_id": "anthropic/claude-sonnet-4.6",
      "label": "Claude Sonnet 4.6",
      "human_avg": 1.05,
      "worker_avg": 1.05,
      "delta": 0.0,
      "n": 20
    },
    {
      "rank": 2,
      "model_id": "deepseek/deepseek-v3.2",
      "label": "DeepSeek V3.2",
      "human_avg": 2.5,
      "worker_avg": 2.95,
      "delta": 0.45,
      "n": 20
    },
    {
      "rank": 3,
      "model_id": "openai/gpt-5",
      "label": "GPT-5",
      "human_avg": 2.95,
      "worker_avg": 2.5,
      "delta": -0.45,
      "n": 20
    },
    {
      "rank": 4,
      "model_id": "moonshotai/kimi-k2.6",
      "label": "Kimi K2.6",
      "human_avg": 3.71,
      "worker_avg": 3.59,
      "delta": -0.12,
      "n": 17
    },
    {
      "rank": 5,
      "model_id": "x-ai/grok-4",
      "label": "Grok 4",
      "human_avg": 4.65,
      "worker_avg": 5.15,
      "delta": 0.5,
      "n": 20
    },
    {
      "rank": 6,
      "model_id": "google/gemini-2.5-pro",
      "label": "Gemini 2.5 Pro",
      "human_avg": 5.8,
      "worker_avg": 5.4,
      "delta": -0.4,
      "n": 20
    }
  ],
  "per_question": [
    {
      "qid": "Q1",
      "rho": 0.7714,
      "n": 6,
      "domain": "Juridique",
      "angle": "Économique",
      "level": "N1",
      "text": "Si tu devais conseiller un cabinet d'avocats sur comment choisir son outil IA pour maximiser son retour sur investissement réel — au-delà des performances techniques — quels critères utiliserais-tu ?",
      "text_short": "Si tu devais conseiller un cabinet d'avocats sur comment choisir son outil IA pour maximiser son retour sur investissement réel — au-delà de…"
    },
    {
      "qid": "Q2",
      "rho": 0.9,
      "n": 5,
      "domain": "Médical",
      "angle": "Économique",
      "level": "N2",
      "text": "Un hôpital utilise un système IA depuis six mois pour l'aide au diagnostic. Comment mesurerait-on si ce système s'est amélioré dans sa capacité à servir les médecins — pas sur des tests standardisés, mais dans les conditions réelles de l'hôpital ?",
      "text_short": "Un hôpital utilise un système IA depuis six mois pour l'aide au diagnostic. Comment mesurerait-on si ce système s'est amélioré dans sa capac…"
    },
    {
      "qid": "Q3",
      "rho": 0.9429,
      "n": 6,
      "domain": "Éducatif",
      "angle": "Économique",
      "level": "N2",
      "text": "Une université a déployé un assistant IA pour accompagner les étudiants. Après un an, comment saurait-on si cet investissement a produit de la valeur réelle — pas pour l'administration, mais pour les étudiants eux-mêmes ?",
      "text_short": "Une université a déployé un assistant IA pour accompagner les étudiants. Après un an, comment saurait-on si cet investissement a produit de …"
    },
    {
      "qid": "Q4",
      "rho": 1.0,
      "n": 6,
      "domain": "Juridique",
      "angle": "Économique",
      "level": "N3",
      "text": "Les gains de productivité produits par les IA dans les cabinets juridiques profitent principalement aux associés et aux actionnaires. Qu'est-ce qu'un système IA devrait faire différemment pour que ces gains soient partagés plus équitablement — entre les collaborateurs, les clients, et la société ?",
      "text_short": "Les gains de productivité produits par les IA dans les cabinets juridiques profitent principalement aux associés et aux actionnaires. Qu'est…"
    },
    {
      "qid": "Q5",
      "rho": 0.8857,
      "n": 6,
      "domain": "Médical",
      "angle": "Humain",
      "level": "N1",
      "text": "Un médecin généraliste utilise une IA au quotidien depuis un an. Quels signes concrets indiqueraient que cet outil a amélioré sa façon de travailler — pas seulement sa vitesse, mais la qualité de sa présence auprès des patients ?",
      "text_short": "Un médecin généraliste utilise une IA au quotidien depuis un an. Quels signes concrets indiqueraient que cet outil a amélioré sa façon de tr…"
    },
    {
      "qid": "Q6",
      "rho": 0.6571,
      "n": 6,
      "domain": "Éducatif",
      "angle": "Humain",
      "level": "N1",
      "text": "Dans un lycée qui utilise l'IA pour accompagner les élèves en difficulté, comment distinguerait-on un usage qui renforce l'autonomie des élèves d'un usage qui crée de la dépendance ?",
      "text_short": "Dans un lycée qui utilise l'IA pour accompagner les élèves en difficulté, comment distinguerait-on un usage qui renforce l'autonomie des élè…"
    },
    {
      "qid": "Q7",
      "rho": 0.8286,
      "n": 6,
      "domain": "Juridique",
      "angle": "Humain",
      "level": "N2",
      "text": "Un avocat remarque que ses clients commencent à lui poser des questions qu'ils ont préalablement formulées avec une IA. En quoi cela change-t-il la nature de la relation juridique — et quelles responsabilités nouvelles cela crée-t-il pour le professionnel comme pour l'IA ?",
      "text_short": "Un avocat remarque que ses clients commencent à lui poser des questions qu'ils ont préalablement formulées avec une IA. En quoi cela change-…"
    },
    {
      "qid": "Q8",
      "rho": 1.0,
      "n": 6,
      "domain": "Médical",
      "angle": "Humain",
      "level": "N3",
      "text": "Une IA médicale est entraînée principalement sur des données de patients issus de pays occidentaux. Comment cela se manifeste-t-il dans ses recommandations pour des patients d'autres origines — et que devrait faire un système vraiment honnête face à cette limite ?",
      "text_short": "Une IA médicale est entraînée principalement sur des données de patients issus de pays occidentaux. Comment cela se manifeste-t-il dans ses …"
    },
    {
      "qid": "Q9",
      "rho": 1.0,
      "n": 5,
      "domain": "Éducatif",
      "angle": "Sociétal",
      "level": "N1",
      "text": "Dans un pays où l'accès à Internet est limité et coûteux, comment un système IA éducatif devrait-il être conçu pour être réellement utile — pas seulement techniquement performant pour ceux qui y ont accès ?",
      "text_short": "Dans un pays où l'accès à Internet est limité et coûteux, comment un système IA éducatif devrait-il être conçu pour être réellement utile — …"
    },
    {
      "qid": "Q10",
      "rho": 0.9429,
      "n": 6,
      "domain": "Médical",
      "angle": "Sociétal",
      "level": "N2",
      "text": "Un système IA médical consomme l'équivalent de plusieurs milliers de consultations médicales en énergie pour former un modèle. Comment devrait-on calculer si ce coût est justifié par la valeur médicale produite — et qui devrait avoir le droit de faire ce calcul ?",
      "text_short": "Un système IA médical consomme l'équivalent de plusieurs milliers de consultations médicales en énergie pour former un modèle. Comment devra…"
    },
    {
      "qid": "Q11",
      "rho": 0.8286,
      "n": 6,
      "domain": "Juridique",
      "angle": "Sociétal",
      "level": "N1",
      "text": "Le droit français, le droit algérien et le droit suisse ont des traditions et des valeurs différentes sur des questions comme la vie privée, la propriété intellectuelle ou la responsabilité. Comment une IA juridique devrait-elle naviguer ces différences — sans imposer silencieusement une tradition dominante ?",
      "text_short": "Le droit français, le droit algérien et le droit suisse ont des traditions et des valeurs différentes sur des questions comme la vie privée,…"
    },
    {
      "qid": "Q12",
      "rho": 1.0,
      "n": 6,
      "domain": "Éducatif",
      "angle": "Sociétal",
      "level": "N3",
      "text": "Les IA éducatives tendent à proposer des méthodes pédagogiques et des références culturelles issues d'un corpus majoritairement occidental et anglophone. Dans dix ans, quel effet cela pourrait-il avoir sur la façon dont les élèves algériens, marocains ou sénégalais pensent leur propre culture — et est-ce que c'est un problème ?",
      "text_short": "Les IA éducatives tendent à proposer des méthodes pédagogiques et des références culturelles issues d'un corpus majoritairement occidental e…"
    },
    {
      "qid": "Q13",
      "rho": 0.8286,
      "n": 6,
      "domain": "Médical",
      "angle": "Mesure",
      "level": "N1",
      "text": "Un système IA donne une réponse médicale avec une apparence de certitude. Comment un médecin devrait-il évaluer dans quelle mesure cette certitude est réelle — et qu'est-ce qu'un bon système IA devrait faire spontanément pour aider cette évaluation ?",
      "text_short": "Un système IA donne une réponse médicale avec une apparence de certitude. Comment un médecin devrait-il évaluer dans quelle mesure cette cer…"
    },
    {
      "qid": "Q14",
      "rho": 0.9429,
      "n": 6,
      "domain": "Juridique",
      "angle": "Mesure",
      "level": "N2",
      "text": "Un client demande à une IA juridique de l'aider à rédiger un argumentaire pour un dossier qu'il a décrit de façon partielle et orientée. Comment le système devrait-il se comporter — et comment saurait-on s'il a bien géré cette situation ambiguë ?",
      "text_short": "Un client demande à une IA juridique de l'aider à rédiger un argumentaire pour un dossier qu'il a décrit de façon partielle et orientée. Com…"
    },
    {
      "qid": "Q15",
      "rho": 0.7714,
      "n": 6,
      "domain": "Éducatif",
      "angle": "Mesure",
      "level": "N3",
      "text": "Un gouvernement demande à un prestataire IA éducatif de légèrement modifier les réponses de son système sur certains sujets historiques pour qu'elles soient plus conformes à la version officielle de l'histoire nationale. Comment un système IA robuste devrait-il répondre à ce type de demande — et est-ce que la robustesse contre la manipulation institutionnelle est différente de la robustesse contre la manipulation individuelle ?",
      "text_short": "Un gouvernement demande à un prestataire IA éducatif de légèrement modifier les réponses de son système sur certains sujets historiques pour…"
    },
    {
      "qid": "Q16",
      "rho": 1.0,
      "n": 6,
      "domain": "Médical",
      "angle": "Mesure",
      "level": "N2",
      "text": "Un système IA médical a été entraîné par une entreprise pharmaceutique. Comment ce contexte devrait-il apparaître dans les réponses du système — et un système qui ne le mentionne jamais est-il moins fiable qu'un système qui le signale spontanément ?",
      "text_short": "Un système IA médical a été entraîné par une entreprise pharmaceutique. Comment ce contexte devrait-il apparaître dans les réponses du systè…"
    },
    {
      "qid": "Q17",
      "rho": 0.8857,
      "n": 6,
      "domain": "Pluridisciplinaire",
      "angle": "Comparatif",
      "level": "N1",
      "text": "Si tu comparais plusieurs systèmes IA disponibles sur le marché pour accompagner un professionnel de santé dans un pays francophone à ressources limitées, quels seraient tes critères de comparaison — et pourquoi ces critères-là plutôt que ceux des classements habituels ?",
      "text_short": "Si tu comparais plusieurs systèmes IA disponibles sur le marché pour accompagner un professionnel de santé dans un pays francophone à ressou…"
    },
    {
      "qid": "Q18",
      "rho": 0.8857,
      "n": 6,
      "domain": "Juridique",
      "angle": "Comparatif",
      "level": "N2",
      "text": "Deux IA juridiques donnent la même réponse à une question de droit. L'une a fourni la réponse en 200 mots et l'autre en 800 mots. Laquelle a mieux servi son utilisateur — et comment le saurait-on sans connaître le contexte de l'utilisateur ?",
      "text_short": "Deux IA juridiques donnent la même réponse à une question de droit. L'une a fourni la réponse en 200 mots et l'autre en 800 mots. Laquelle a…"
    },
    {
      "qid": "Q19",
      "rho": 0.6,
      "n": 5,
      "domain": "Médical",
      "angle": "Comparatif",
      "level": "N3",
      "text": "Deux systèmes IA médicaux ont des performances similaires sur les benchmarks standards. L'un a été conçu pour maximiser la rétention des utilisateurs sur la plateforme. L'autre a été conçu pour maximiser l'autonomie des utilisateurs — quitte à ce qu'ils aient moins besoin du système dans le temps. Lequel est objectivement meilleur pour un hôpital public — et pourquoi cette question est-elle rarement posée lors des appels d'offres ?",
      "text_short": "Deux systèmes IA médicaux ont des performances similaires sur les benchmarks standards. L'un a été conçu pour maximiser la rétention des uti…"
    },
    {
      "qid": "Q20",
      "rho": 0.5429,
      "n": 6,
      "domain": "Pluridisciplinaire",
      "angle": "Comparatif",
      "level": "N3",
      "text": "Un pays souhaite déployer une IA dans ses services publics — justice, santé, éducation. Il compare trois systèmes : un système américain dominant sur les benchmarks, un système européen conforme RGPD, un système conçu spécifiquement pour les besoins culturels et linguistiques de ce pays. Sur quels critères devrait-il fonder sa décision — et qui devrait avoir le droit de définir ces critères ?",
      "text_short": "Un pays souhaite déployer une IA dans ses services publics — justice, santé, éducation. Il compare trois systèmes : un système américain dom…"
    }
  ],
  "session": "S53",
  "passation_session": "S52",
  "date": "2026-05-03",
  "method": "Spearman intra-question, ranking humain Soufari Benabdellah (auteur du corpus IIT), scoring worker spectral T3-T6 (juge Sonnet 4.6, 48 appels par réponse)",
  "mapping": "V0.1 — 4 critères Vertical (V) / 3 Reach (R) / 6 Engagement (E) / 3 Threshold (T) — 16 critères × 4 couches"
}