❓ Quiz — intermediate/session-09

Question 1 — Pensée produit

Quelle est la première question à se poser quand on envisage une fonctionnalité IA ?

A Quel modèle est le plus performant sur les benchmarks récents ? B Quel problème utilisateur cette fonctionnalité résout-elle ? C Faut-il utiliser du RAG (Retrieval-Augmented Generation, génération augmentée par récupération) ou du fine-tuning ? D Quel est le coût par appel API (Application Programming Interface, interface de programmation) ?

Question 2 — UX de l'incertitude

Un outil d’OCR (Optical Character Recognition, reconnaissance optique de caractères) extrait les montants de factures. La meilleure pratique UX (User Experience, expérience utilisateur) est :

A N’afficher que les montants dont l’IA est certaine, masquer les autres B Afficher tous les montants de la même façon pour ne pas inquiéter l’utilisateur C Surligner les montants à faible confiance pour inviter à une relecture ciblée D Bloquer le document entier dès qu’un champ est incertain

Question 3 — Human in the loop

Sur le spectre « human in the loop » (humain dans la boucle), le niveau « approbation humaine » signifie :

A L’IA agit seule et l’humain peut annuler après coup B L’IA propose, mais rien n’est exécuté sans validation humaine préalable C L’humain fait tout, l’IA observe D L’IA et l’humain travaillent en parallèle sur des tâches différentes

Question 4 — Triangle de la valeur

Parmi ces tâches, laquelle réunit le mieux les trois conditions de valeur de l’IA (volume élevé, tolérance à l’imperfection, boucle de rétroaction claire) ?

A Le calcul mensuel de la paie des salariés B La rédaction du rapport annuel destiné aux actionnaires C Le tri quotidien de milliers de tickets de support client par catégorie D La signature d’un contrat de fusion-acquisition

Question 5 — Métriques produit IA

Le taux d’escalade d’un assistant IA mesure :

A Le pourcentage de réponses générées en moins d’une seconde B La proportion de cas où un humain doit reprendre la main C Le nombre d’utilisateurs actifs mensuels D Le coût moyen par requête

Question 6 — Tests A/B

Vous testez deux variantes de prompt sur votre assistant. La variante A obtient 72 % de complétion de tâche, la variante B 81 %. La démarche correcte est :

A Déployer B immédiatement pour 100 % des utilisateurs B Vérifier la significativité statistique et le volume, puis déployer B progressivement via un feature flag (interrupteur logiciel d’activation) C Garder A, car changer un prompt en production est risqué D Fusionner les deux prompts pour obtenir le meilleur des deux

Question 7 — Coût-bénéfice

Une tâche manuelle coûte 40 000 €/mois. La version assistée par IA coûte 15 000 €/mois (API + infrastructure + supervision humaine). Le projet d’intégration a coûté 50 000 €. Le point d’équilibre (breakeven) est atteint en :

A 1 mois B 2 mois C 3,3 mois environ D 50 mois

Question 8 — Construire la confiance

Pour qu’un utilisateur fasse confiance à un assistant de recherche documentaire, la pratique la plus efficace est :

A Expliquer l’architecture du modèle (transformers, attention) dans l’aide en ligne B Afficher les sources citées et permettre de signaler une réponse incorrecte C Affirmer les réponses avec assurance pour paraître fiable D Masquer les cas où l’IA n’a pas trouvé de réponse

Question 9 — Build / Buy / Fine-tune

Une entreprise veut classer automatiquement ses courriels entrants en 6 catégories métier. Volume : 2 000/jour. Aucune contrainte de souveraineté particulière. Le choix par défaut recommandé est :

A Construire un modèle from scratch (depuis zéro) pour maîtriser toute la chaîne B Affiner (fine-tuner) immédiatement un modèle open source C Utiliser une API sur étagère avec un bon prompt, et n’envisager le fine-tuning que si la précision plafonne D Recruter une équipe de recherche en apprentissage automatique

Question 10 — IA responsable

Un outil de pré-tri de candidatures rejette automatiquement les CV (Curriculum Vitae) sous un certain score, sans revue humaine. Le problème le plus grave est :

📊 Barème

Score	Interprétation
9–10	Excellente maîtrise — prêt·e pour la mise en pratique sur un vrai projet
7–8	Solide — revoir les points manqués avant la session 10
5–6	Fragile — relire les slides 14–25 (valeur, métriques, coût-bénéfice, décision)
< 5	Revoir la session complète + refaire les exercices 1 et 2 avec la page interactive

A Le coût des appels API est trop élevé B Une décision à fort impact sur des personnes est prise sans humain dans la boucle, avec un risque de biais non contrôlé C Le temps de réponse du système est trop long D L’interface n’utilise pas les couleurs de la charte graphique

Quiz — Session 9 : Construire des produits IA