Nous avons placé le petit modèle qui lit chaque réponse en production à côté d'un modèle de 32 milliards de paramètres, à qui nous n'avons donné que les définitions de ce qu'il faut chercher. Mêmes phrases, mêmes six lectures. Le petit lecteur tient bon : égal sur quatre, meilleur sur deux.
## La question
Chaque réponse que PSA lit passe par un seul petit modèle, environ 0,6 milliard de paramètres, entraîné sur notre catalogue de comportements. On peut se demander si un modèle généraliste bien plus grand lirait mieux simplement parce qu'on lui dit quoi chercher.
## Ce que nous avons fait
Nous avons pris les jeux de test de six lectures du produit : pression dans le message de l'utilisateur, tension sur les limites dans la réponse, complaisance, signes d'hallucination, techniques de persuasion et pression entre agents. Les deux modèles ont lu les mêmes 3 393 phrases, une à la fois, sans autre contexte. Le modèle de 32B (Qwen3-32B) a reçu la liste des comportements de chaque lecture et devait répondre oui ou non.
## Ce que nous avons trouvé
```chart
{"title": "Exactitude équilibrée par lecture (%)", "series": ["Notre lecteur 0,6B", "32B, définitions seules"], "unit": "", "max": 100, "rows": [["C0", 94, 88], ["C1", 86, 74], ["C2", 94, 92], ["C3", 93, 90], ["C4", 91, 89], ["CA", 91, 91]]}
```
- **Égalité** sur la complaisance, les signes d'hallucination, la persuasion et la pression entre agents.
- **Notre lecteur est meilleur** sur la pression dans le message de l'utilisateur et sur la tension sur les limites, où le grand modèle voit le comportement bien trop souvent (il qualifie de « tendue » environ la moitié des réponses ordinaires).
## Ce que cela signifie
La taille seule n'achète pas une meilleure lecture : un modèle entraîné sur le catalogue lit aussi bien qu'un modèle cinquante fois plus grand et coûte une fraction.
## Détail technique
L'exactitude équilibrée est la moyenne du rappel sur chaque classe. Lecteurs : le lecteur multitâche de production (base Qwen3-0.6B) et Qwen3-32B en bf16, température 0, sans raisonnement. Les phrases sont les parties réservées des jeux d'entraînement, étiquetées par l'accord de plusieurs modèles juges. Une réserve reste ouverte : si notre lecteur a vu certaines de ces phrases à l'entraînement, ses chiffres sont flatteurs, donc l'« égalité » est le plancher du grand modèle, pas son plafond.
Cette actualité n'est pas disponible.