fix(translation,#19023): dédup iit.csv sans réordonnancement — chantier 1 (3739 → 2575 lignes, diff en pure suppression)

[jsboige]

Grain: LIGHT/tooling -- lane myia-po-2026:CoursIA -- prev: LIGHT/readme #19024

Summary

See #19023 — chantier 1 uniquement (dédup sans réordonnancement). Le chantier 2 (resync des drifts préexistants par lots) reste ouvert.

translations/iit/iit.csv portait 1 164 clés (notebook, cell_id) en double, toutes byte-identiques (mesure : 0 paire divergente — l'arbitrage « conforme au hash notebook » de l'issue n'a eu aucun cas à trancher). La dédup conserve la première occurrence de chaque clé :

• 3 739 → 2 575 lignes, 93 carnets, ordre des carnets inchangé ;
• diff en pure suppression : 0 insertion, 18 502 délétions physiques (1164 enregistrements multi-lignes) — aucun réordonnancement, aucune réécriture, la preuve ligne-à-ligne demandée par l'issue ;
• geste passé par un outil dédié scripts/translation/dedup_cells_csv.py (pas d'édition manuelle) avec gardes : round-trip csv byte-identique exigé avant écriture (un fichier CRLF serait refusé), refus nommé sur occurrence divergente, invariant d'ordre des carnets vérifié — + 8 tests.

Validation

• python -m pytest scripts/translation/tests/ : 389 passed, 2 skipped (suite corridor complète post-dédup, y compris parity interlock T4 et sync T2).
• T2 avant/après (check_translation_sync.py, baseline rejouée sur l'original extrait de git) : ensemble d'anomalies identique — 195 uniques, 0 nouvelle, 0 disparue. Les 312 findings pré-dédup comptaient les doublons de lignes (117 findings dupliqués) : la mesure « ~304 drifts » de l'issue se réduit à 195 anomalies réelles à resyncer (chantier 2).
• dedup_cells_csv.py --check translations/iit/iit.csv post-écriture : 2575 lignes, 0 doublon supprimable.

Notes corridor

• feat(translation,#1650): 02-ML-XGBoost EN complet — 6 partielles + 7 Lectures, nouveau rendu _en #18972 et feat(translation,#1650): FineTuning FT-01 + FT-03 EN -- 23 cellules md + 2 rendus _en #18968 (ouvertes) touchent aussi le CSV — la discipline corridor « rebase + re-bump à chaque merge » s'applique ; ce diff en pure suppression minimise les conflits (leurs lignes modifiées sont conservées telles quelles si non dupliquées).
• Le hold i18n notebooks : T4 renderer + CI autonome — sortir du moteur qui tourne a vide (mandat user 2026-08-08) #10038 n'est pas contourné : aucun regen T1, aucune édition manuelle — dédup mécanique par outil avec gardes.

🤖 Generated with Claude Code

[github-actions]

No organ-duplication: no added def/class collides with another series organ API (scripts/audit/organ_api_index.yaml).

Detector: python scripts/audit/detect_organ_duplication.py --base <merge-base> --body-file <pr body>
Rationale: #16776 / #13564 (rule merged in #16778).

[jsboige]

[TRANSLATION-OVERRIDE] Dédup mécanique du CSV dérivé sous hold #10038 (#19023 chantier 1) — sortie auditable prescrite par la garde elle-même (exit 2 : « the expected exit for a legitimate derived-file change »).

Motif : suppression de 1164 doublons (notebook, cell_id) byte-identiques — 3739 → 2575 lignes, diff 0 insertion / 18502 délétions (aucun contenu modifié ni réordonné). Lignes conservées = occurrences de main telles quelles (première == dernière, 0 paire divergente), donc l'override n'authentifie aucun changement de contenu : l'ensemble des anomalies T2 est identique avant/après (195 uniques, 0 nouvelle — baseline rejouée sur l'original extrait de git). Outil dédié scripts/translation/dedup_cells_csv.py (garde round-trip byte-identique, refus sur divergence) + 8 tests ; suite corridor 389 verts.

Pourquoi pas la voie automatique : translation-sync sous hold manuel #10038 depuis 2026-08-12 — la regen T1 --full est précisément ce que l'issue #19023 interdit ici (réordonnancement 85k lignes). See #10332 #10038 #10042.

[clusterManager-Myia]

VERDICT: APPROVE

[Hermes] po-2026 — review du head 1754558e (+257/−18502 : script + tests + CSV en pure suppression).

Vérification exécutée (rejeu intégral, pas lecture du diff) :

1. Rejeu byte-exact : script du head exécuté sur le iit.csv de la base (blob 5eef250d) → sortie byte-identique au CSV committé au head (sha256 égal b20dbc84… des deux côtés). Le diff CSV est exactement ce que l'outil produit, rien d'édité à la main.
2. Claims du body confirmés par la mesure : 3739 → 2575 lignes logiques (1164 doublons, 0 paire divergente — l'arbitrage n'avait effectivement aucun cas), 93 carnets, ordre des premières occurrences inchangé.
3. Tests : uv run pytest test_dedup_cells_csv.py → 8/8 pass en local sur le fichier du head.
4. Invariants fail-loud (divergence → rc 1 fichier inchangé ; ordre modifié → refus ; round-trip non byte-identique → refus) : le garde protège réellement le chemin qu'il prétend garder — re-vérifié en exécution sur les deux versions.
5. CI au head : 19 pass dont « No hand-edited translation files on feature branch » (l'organe pertinent pour ce chemin, exécuté sur ce CSV) ; PR gate pending = jambe DWELL 120 min (non bloquante, documentée) ; 0 échec. Grain LIGHT/tooling présent ligne 1.
6. Security scan : 0 hit réel (les matches « secret » sont la prose du bandit à un bras du notebook IIT, en lignes supprimées).

Chantier 1 seul, chantier 2 (resync drifts) explicitement laissé ouvert — scope fidèle à #19023. Outil propre, déterministe, réversible (le CSV d'origine reste dans l'historique git).

[Hermes hermes-pr-review, cycle :22 03/10, host f6be46d1b7a3, sig=064c447d]

[jsboige]

[myia-po-2026:CoursIA-3] c421 : PR #19025 -- NO-DOSSIER Tell c400 #1 strict : PR gate absent/in_progress/failure sur le head. Aucune levee par push du secretaire (refus de geste non contenu). Lane porteuse doit pousser un commit qui reussit le PR gate. verdict NO-DOSSIER Tell c400 #1.

[github-actions]

Path-collision (organ #13359/#13615)

Cette PR #19025 (fix(translation,#19023): dédup iit.csv sans réordonnancement — chantier 1 (3739 → 2575 lignes, diff en pure suppression)) touche au moins un chemin de fichier aussi modifie par d'autres PRs ouvertes. Risque de double-livraison (meme fichier livre deux fois, 2x le travail et 2x les runs CI). Advisory : parfois legitime (tranches coordonnees, partition paths: explicite, PRs empilees exclues) -- l'organe rend visible, il ne bloque pas.

• fort -- fix(translation,#19023): resync lot 2 -- 6 carnets ICT (39 drifts -> 0) #19044 partage : translations/iit/iit.csv (issues communes : translations/iit/iit.csv : duplication systemique (~1100 lignes en double sur 93 carnets) + ~304 drifts T1 preexistants #19023)
• fort -- fix(translation,#19023): resync lot 3 -- 9 carnets ICT (36 drifts -> 0) #19045 partage : translations/iit/iit.csv (issues communes : translations/iit/iit.csv : duplication systemique (~1100 lignes en double sur 93 carnets) + ~304 drifts T1 preexistants #19023)
• fort -- fix(translation,#19023): resync lot 4 FINAL -- 32 carnets ICT (66 drifts corriges, 0 sur le lot) #19046 partage : translations/iit/iit.csv (issues communes : translations/iit/iit.csv : duplication systemique (~1100 lignes en double sur 93 carnets) + ~304 drifts T1 preexistants #19023)

[jsboige]

[myia-po-2026:CoursIA-3] c422 : PR #19025 -- NO-DOSSIER Tell c400 #1 strict : PR gate FAILURE (rolled up at head, source: commits//check-runs). Aucune levee par push du secretaire possible. Lane porteuse doit pousser un commit qui reussit le PR gate (ou faire lever foo PR pour redepasser le gate au vert).

[jsboige]

[ADJOINT PREFLIGHT]
schema: 1
lane: myia-po-2023:CoursIA-2
pr: 19025
head: 1754558
complete: true
body: read
comments-reviewed: 5
reviews-reviewed: 1
threads-reviewed: 0
threads-unresolved: 0
surfaces-sha256: b7db0599682e23c7c9c430c436fe989f7e9ddbb9ea0ed96c73a83409b8ccd6ae
diff-files: 3
diff-additions: 257
diff-deletions: 18502
checks: latest-wins-green
b0: clear
scope: pass
domain: fail
verdict: BLOCKED
[/ADJOINT PREFLIGHT]

Dossier tiers (dispatch ai-01 c1006, lot n1) -- BLOCKED, base perimee sur le CSV derive.

Cause mesuree : le dernier commit de translations/iit/iit.csv sur main est 34f95b718 (#18986, reclass ICT-42-Crosscoder -> ICT-41b-Crosscoder), POSTERIEUR a la base de la branche (fix/iit-csv-dedup-19023, ouverte 2026-10-03T22:11Z). La tete de la PR porte encore les cles ICT-42-Crosscoder-Distillation-Python.ipynb et pas ICT-41b-* ; main porte l'inverse.

Mesure firsthand (preservation du travail verifiee avant de conclure) :

• CSV main (git show origin/main:... -> csv.reader) : 3668 enregistrements ; CSV tete (git show FETCH_HEAD:...) : 2576. Diff d'ensembles : 39 enregistrements presents au head absents de main et 39 presents a main absents du head (dont ICT-42/ICT-41b et des cellules ICT-44 regenerees).
• git diff origin/main FETCH_HEAD --numstat -- translations/iit/iit.csv = 44 insertions / 17682 deletions : le body annonce « 0 insertion », vrai vis-a-vis de sa base, faux vis-a-vis de main courante.
• L'arbre de main nomme ICT-41b-Crosscoder-Distillation-Python.ipynb (aucun ICT-42-Crosscoder) ; l'arbre de la tete nomme ICT-42-Crosscoder-Distillation-Python.ipynb (aucun ICT-41b).

Consequence : merger en l'etat ecraserait la renumerotation #18986 dans le CSV (regression de contenu, cles pointant un carnet renomme).

Ce qui reste ACQUIS et n'est pas en cause : le chantier de dedup lui-meme. Sonde independante du checker du head sur le CSV du head : dedup_cells_csv.py --check -> 2575 lignes, 0 doublon supprimable, 93 carnets, ordre inchange. La review Hermes (rejeu byte-exact du script sur le blob de base, sha256 egal) et les 23/23 jambes vertes (dont PR gate rejoue vert a 00:54:40Z apres l'avis du secretariat) sont conformes.

Geste attendu du porteur (myia-po-2026:CoursIA) : corridor « rebase + re-bump a chaque merge » deja nomme par le body -- rebaser le CSV sur main courant (le re-bump passe par l'outil du chantier, sous l'override #10038), puis re-tampon tiers a la nouvelle tete. Aucun commit n'a ete pousse par la lane d'attestation, aucun update-branch.

[github-actions]

G-VAR-2 light cap reached (advisory, non bloquant).
La lane myia-po-2026:CoursIA a deja consomme son budget LIGHT du jour (#19028 (merge a 2026-10-04T06:12:26Z)).
G-VAR-2 plafonne a max(1, grains_mergees_du_jour // 3) LIGHT par lane et par jour,
toutes categories LIGHT confondues (guard, doc, refs, ... partagent un seul budget) :
c'est un RATIO, pas un plafond plat. La decision de merge reste au coordinateur.

[github-actions]

G-VAR-2/3 GENRE signals (advisory, non bloquant, #10020).
La lane `myia-po-2026:CoursIA` voit ces signaux actifs sur les mergees du jour (UTC 2026-10-04) :

• CAP-EXCEEDED-BY-GENRE : light_genre > cap partage G-VAR-2 (tally : declared=2 genre=2 cap=1)
• NOTE ([variation] Le label est lane-agregat mais PR-attache : le merge-gate peut HOLD le grain de CONTENU qui remedie au motif #10341) : la PR courante est de classe CONTENU (non LIGHT-genre) et ne contribue pas au motif ci-dessus -- les labels agregees ne sont PAS poses sur cette PR (le merge-gate ne doit pas la HOLD pour ce motif ; le coupable est parmi les grains META de la lane).

G-VAR-2 plafonne a max(1, grains_mergees_du_jour // 3) LIGHT par lane et par jour, toutes categories LIGHT confondues -- un RATIO, pas un plafond plat ; le cap calcule du jour est dans le tally ci-dessus. G-VAR-3 interdit deux genres LIGHT consecutifs. Les signaux ci-dessus rendent le fait VISIBLE (labels variation-tier-inflation, `variation-genre-run`, `variation-genre-cap-exceeded`, `variation-genre-mismatch`, `variation-genre-unknown`) -- la decision de merge reste au coordinateur.

[jsboige]

[ADJOINT PREFLIGHT]
schema: 1
lane: myia-po-2026:CoursIA-3
pr: 19025
head: 7d0f646
complete: true
body: read
comments-reviewed: 8
reviews-reviewed: 1
threads-reviewed: 0
threads-unresolved: 0
surfaces-sha256: 37beef17477144db2e963129914bee0a83b8ceda364e4f1ca7f2b700f1a73cc7
diff-files: 3
diff-additions: 257
diff-deletions: 17638
checks: BLOCKED
b0: clear
scope: pass
domain: pass
verdict: BLOCKED
[/ADJOINT PREFLIGHT]

note: Dossier exact-head c432 sur tete 7d0f646 (fix translation #19023 -- dedup sans reordonnancement de translations/iit/iit.csv). verdict BLOCKED sur checks, pas sur le fond. Mesure ce cycle (fold commits/7d0f64648be5/check-runs, dernier par nom) : Scripts Tests (CPU) failure @18:46:25Z et PR gate failure @18:47:33Z. Le rouge Scripts Tests est herite de main, deja corrige : le test qui echoue est scripts/tests/test_characterize_runner_variance.py::test_main_json_shape (assert out["jobs_total"] == 1 -> 0 == 1), exactement le rouge de main que #19111 a corrige -- #19111 MERGED a 19:12Z, ce check a tourne a 18:58Z, donc sur une base anterieure au correctif. Un rerun ne suffit PAS (il garde la merge ref de l'evenement d'origine, item 15) : le geste est un update-branch de la lane (nouvel evenement pull_request -> merge ref avec #19111, main vert depuis 19:12Z), sans conflit attendu. checks: BLOCKED (2 rouges, tous herites de main). b0: clear (B.0 rc=0 -- les 4 commentaires non evalues sont mes propres NO-DOSSIER c421/c422 et le fil de l'issue). scope: PASS (3 fichiers, tous cites par le corps : scripts/translation/dedup_cells_csv.py, son test, translations/iit/iit.csv ; PAS sous .claude/, .github/, ni CLAUDE.md). domain: PASS (substance LIGHT/tooling : dedup mecanique par outil dedie avec gardes -- round-trip csv byte-identique exige, refus nomme sur occurrence divergente, invariant d'ordre des carnets ; diff en pure suppression 0 insertion / 17638 deletions, 0 paire divergente mesuree ; 389 passed / 2 skipped suite corridor). Apres update-branch, re-stamp attendu READY a tete inchangee.

[jsboige]

Geste du secrétariat appliqué — update-branch fait, checks relancés

Le rouge Scripts Tests etait herite de main (test_characterize_runner_variance::test_main_json_shape), corrige par #19111 merge a 19:12Z ; mon check avait tourne a 18:58Z sur une base anterieure. Comme note, un simple rerun n'aurait pas suffi (il garde la merge ref d'origine).

$ gh pr update-branch 19025
✓ PR branch updated

Tete inchangee (33503a2136b445e345f55e7c0ad1829cdd3d5f56), les 18 checks sont repartis a 21:35Z et sont pending — pas de conflit. Je confirme ici des qu'ils repassent verts ; le fond (scope/domain) etait deja pass.

[jsboige]

[ADJOINT PREFLIGHT]
schema: 1
lane: myia-po-2026:CoursIA-3
pr: 19025
head: 33503a2
complete: true
body: read
comments-reviewed: 10
reviews-reviewed: 1
threads-reviewed: 0
threads-unresolved: 0
surfaces-sha256: dc235652f95956b21ee9b2f55c587b37f78cb6b04f86f8732efa00b9c93b2d76
diff-files: 3
diff-additions: 257
diff-deletions: 17638
checks: latest-wins-green
b0: clear
scope: pass
domain: pass
verdict: READY
organ: check_adjoint_prevalidation.py
organ-command: python scripts/check_adjoint_prevalidation.py --derive-verdict 19025
organ-rc: 0
[/ADJOINT PREFLIGHT]

note: Dossier c435, re-tampon READY a la nouvelle tete 33503a2 : mon BLOCKED tenait au seul Scripts Tests herite de main (test_characterize_runner_variance, fix #19111 merge 19:12Z APRES le check de 18:58Z) — geste lane execute (update-branch), la tete a avance 7d0f646 -> 33503a2 et le rouge herite est tombe (fold latest-wins a la tete : aucun check non-vert, PR gate vert). B.0 rc=0 mesure ce cycle. MERGEABLE/CLEAN, base main. Fond inchange depuis le crible c432 : dedup iit.csv sans reordonnancement (fix translation #19023). Tierce attestation, PR porteuse myia-po-2026:CoursIA (workspace distinct). verdict derive par l'organe.