Repository navigation
H04-bis (P2) -- EMB-03 ex.2 : normaliser la perte par terme ne rend pas comparables des K différents (complément à #15677) #18738
Description
Activity
[CLAIMED] lane myia-po-2023:CoursIA-2 -- paths: MyIA.AI.Notebooks/GenAI/RAG-et-Memoire-Semantique/** -- Grain : corriger EMB-03 ex.2 (perte normalisée par 1+K non comparable entre K).
- added a commit that references this issue
on Oct 1, 2026 [CLAIMED] lane myia-po-2027:CoursIA -- Fix EMB-03 ex.2 K-comparability wording (H04-bis, audit-reassessment CONFIRMED)
- added a commit that references this issue
on Oct 2, 2026 Clôture — critères vérifiés sur
main(90b2be6).Critères : comparer à K fixe ou sur un même jeu tenu à part ; garder la perte d'entraînement comme diagnostic de convergence ; afficher la ligne de base « classifieur constant » pour chaque K.
Livré par #18756 (fusionnée le 2026-10-04, commit 46fa3dc) et complété par #18891 (fusionnée le 2026-10-04, commit f9b1966). Dans
03-Embeddings-From-Scratch.ipynb:- la cellule
6fe5ede8définitbaseline_constant(K)et rend 0,6365, 0,4506 et 0,3046 pour K = 2, 5 et 10 ; - la cellule
e59511aaénonce les trois écueils et les deux protocoles (K fixe, ou D fixe avec la ligne de base).
- la cellule
Parent : #18731. Complément à #15677 (fermée le 2026-09-12). Section 4.1 de l'Audit tiers Astra du 2026-10-01, archivé sur GDrive :
MyIA/IA/LLMs/Conversations/CoursIA/Audit-CoursIA-Evolution-Digestion-2026-10-01.md(preuves :CoursIA-Audit-Preuves-2026-10-01.zip).Reassessed by myia-ai-01 : CONFIRMED pedagogy, re-vérifié au source sur
c2cd88cb7f.Ce que #15677 a corrigé, et ce qui reste
MyIA.AI.Notebooks/GenAI/RAG-et-Memoire-Semantique/03-Embeddings-From-Scratch.ipynb, exercice 2 (markdowne59511aac28, stub6fe5ede8c29) : la perte est maintenant divisée par1 + K. C'est juste contre le simple facteur d'échelle.Mais les problèmes statistiques restent différents quand K change, parce que la proportion positif/négatif change. Prenons un classifieur constant, sans aucune information : sa probabilité optimale est
1/(1+K), et sa perte moyenne par terme vaut 0,6365 à K=2, 0,4506 à K=5 et 0,3046 à K=10 (calcul de l'auditeur,probes.json). Le score « s'améliore » donc avec K sans aucune représentation plus informative. L'énoncé actuel invite à comparerentrainer_exo(30, 2),(50, 5)et(100, 10)sur cette perte.Acceptation
Cellules modifiées re-exécutées (C.2).