Option Code · base + Code
Travailler sur du code, sans enjoliver.
L'option Code s'ajoute à la base. Elle travaille sur du code avec le modèle livré sophie-v1-coder:7b (V1). Les entraînements R1 à R4 n'ont pas apporté de gain prouvé ; les chiffres ci-dessous restent ceux de la V1.
Les chiffres anciens de cette page sont historiques (12/10/2026) ; mesure officielle du code : 10/11/2026
Les quatre étages
Le premier mot n'est pas encore la vraie demande.
Les trois premiers étages portent sur une épreuve fabriquée. Le quatrième est l'examen réel : c'est la limite principale.
0/11 vraies demandes
Ces demandes réelles n'ont pas été réussies. Sophie Code ne sait pas encore chercher seule l'information, traverser plusieurs fichiers, écrire son propre banc et travailler de façon fiable sur le projet de quelqu'un d'autre.
Source : mesure interne SophIA, analyse du 12/10/2026 et tableau « Les étages ».
Ce qu'elle sait faire
- Réparer une erreur d'un seul mot : 76/78.
- Rétablir une ligne supprimée : 50/75.
- Écrire de petites fonctions neuves : 15/32.
- Passer les contrôles et poser une correction quand un banc existe.
Ce qu'elle ne sait pas encore faire
- Une vraie demande complète : 0/11.
- Une fonction longue de manière fiable : 2/15.
- Aller chercher seule dans les fichiers, exécuter, lire puis recommencer.
- Prouver que l'entraînement a amélioré le modèle : R2 refusé ; R4 = R3 sur l'épreuve, 130/179 et 4/4.
Un examen public
MBPP : 84,4 %.
Le bulletin du 10/10 donne la valeur la plus récente. Elle ne remplace pas les quatre étages : MBPP mesure des fonctions publiques, pas une demande réelle sur plusieurs fichiers.
Source : mesure interne SophIA, bulletin daté du 10/10/2026. Valeur MBPP : 84,4 %.
sophie-v1-coder:7b. R1, R2, R3 et R4 sont des entraînements/mesures internes ; R2 a perdu (2 gains, 20 pertes) et R4 est écarté, notamment parce que son épreuve était contaminée par des réponses de l'épreuve.Mesure officielle du code · 10/11/2026
Les tentatives independantes sont maintenant utilisees dans les chantiers : 3 passages sur 18 commits de 20 lignes au plus. La mesure passe de 26/54 au premier coup a 32/54 (59 %) avec jusqu a quatre tentatives ; 6 rattrapes, 0 perdu, McNemar p = 0,03.
Les changements de plus de 20 lignes passent de 2/20 a 3/20 avec la feuille de route ; ce resultat n est pas significatif. La limite actuelle reste donc explicite.
Source : CHIFFRES_OFFICIELS_1011.md, section 2 ; graphe v152, etat du 11/11/2026.