Notes d’ingénierie
Des articles pour ceux qui
livrent le stack
Textes sur React, Node.js, TypeScript et AI. Un corps traduit est affiché quand il existe. Sinon vous voyez le texte anglais et une note qui le dit.
Tag : distillation
Le ajustement fin est devenu peu coûteux, mais les agents ont toujours besoin d’un mécanisme de contrôle pour les poids.
Comment transformer les leçons enregistrées d’un agent en poids grâce à la self-distillation en temps réel, à quatre critères de promotion, et pourquoi répéter le cycle trois fois le rend inefficace.
9 min de lectureDistillation à étiquettes souples pour un agent SQL de 0,8 milliard : pourquoi un enseignant Qwen plus faible a gagné
L’ajustement fin LoRA à l’aide d’étiquettes souples top-k issues de traces figées a permis à un agent SQL de 0,8 milliard de paramètres d’atteindre 55 des 220 tâches, et un modèle enseignant Qwen moins performant a surpassé le modèle GPT plus puissant.
20 min de lecture
FAQ
À propos de ces articles
Oui. Chaque texte est un rewrite anglais original pour ce site. Structure et code suivent la source ; la prose est réécrite et contrôlée.
L’anglais est la source. Une autre langue n’apparaît que si ce corps traduit existe. Une traduction absente reste en anglais, y compris sur une adresse localisée.
Les brouillons entrent en file après relecture. L’import ne prend que les slugs nouveaux ou modifiés — sans doublons.
Exemples illustratifs. Validez stack et licences avant la prod. Pour une livraison, envoyez le brief.
Devis en 24 h
Besoin du même stack en couche opérateur ? Envoyez le brief — devis sous 24 h.