Aller au contenu principal

Définition

Fine-tuning d'un LLM : définition, coût et alternatives (RAG)

Le fine-tuning, que l'on traduit par « réglage fin » ou « ajustement » d'un modèle, modifie un LLM existant à partir de vos propres exemples. C'est un outil puissant, mais rarement le premier à sortir : dans nos projets d'automatisation IA pour PME, il arrive après les instructions, les règles métier et la recherche documentaire.

Fine-tuning : la définition

Un grand modèle de langage (LLM) est d'abord pré-entraîné sur un immense corpus de textes généralistes. Le fine-tuning reprend ce modèle et poursuit son entraînement sur un jeu de données beaucoup plus petit et ciblé : des paires « entrée, sortie attendue » qui montrent la tâche à accomplir. À la fin, ce ne sont plus les instructions qui changent, ce sont les paramètres du modèle eux-mêmes.

En français, on rencontre plusieurs traductions : réglage fin, ajustement fin, affinage ou spécialisation d'un modèle. Elles désignent la même opération. Quand on parle de fine-tuning d'un LLM, on vise le plus souvent un modèle de texte, mais la technique s'applique aussi aux modèles de vision ou de classification.

Il en existe deux grandes familles : le fine-tuning complet, qui réentraîne l'ensemble du modèle et demande beaucoup de calcul, et les méthodes dites légères (LoRA et apparentées), qui n'ajustent qu'une petite couche ajoutée au modèle. Ce sont ces dernières qui rendent le fine-tuning accessible hors des laboratoires.

Le fine-tuning entraîne à nouveau un modèle généraliste sur vos exemples pour obtenir un modèle spécialisé ; le RAG laisse le modèle inchangé et lui fournit vos documents à chaque question FINE-TUNING : ON MODIFIE LE MODÈLE Modèle généraliste Vos exemples annotés Entraînement complémentaire Modèle spécialisé Utile pour un ton, un format ou une tâche répétée. RAG : ON NE TOUCHE PAS AU MODÈLE Vos documents Modèle inchangé
Le fine-tuning modifie le modèle ; le RAG lui donne vos documents à lire. Pour des données qui changent, le RAG suffit souvent.

Fine-tuning ou RAG ?

C'est la question qu'on nous pose le plus souvent, et notre réponse est presque toujours la même : commencez par le RAG. Le RAG (génération augmentée par la recherche) ne touche pas au modèle : à chaque question, il va chercher les passages utiles dans vos documents et les fournit au modèle comme contexte. Le fine-tuning, lui, grave un comportement dans le modèle.

La différence est pratique avant d'être technique. Avec le RAG, une procédure mise à jour est prise en compte dès qu'elle est indexée, et chaque réponse peut citer sa source. Avec le fine-tuning, une connaissance apprise reste figée jusqu'au prochain entraînement, et le modèle ne sait pas dire d'où il la tient. Pour faire répondre une IA sur vos contrats, vos fiches produits ou vos procédures qualité, le RAG l'emporte ; notre guide pratique du RAG en entreprise détaille la mise en œuvre.

Le fine-tuning reprend l'avantage quand il s'agit de forme plutôt que de savoir : un format de sortie très strict, un ton imposé, une classification répétée à grand volume, ou un petit modèle qu'on veut rendre aussi bon qu'un grand sur une seule tâche. Les deux se combinent d'ailleurs bien : un modèle ajusté pour la forme, alimenté par un RAG pour le fond.

Fine-tuning IA : comment ça se passe dans un projet

Un fine-tuning sérieux suit quatre étapes. D'abord, constituer le jeu d'exemples : des cas réels, relus par quelqu'un du métier, avec la réponse attendue. C'est l'étape la plus longue, et celle qui décide du résultat. Ensuite, mettre de côté un jeu de test que le modèle ne verra jamais pendant l'entraînement. Puis entraîner, le plus souvent avec une méthode légère. Enfin, comparer le modèle ajusté au modèle d'origine bien instruit, sur ce même jeu de test.

Cette dernière comparaison est celle que beaucoup oublient. Un modèle généraliste avec de bonnes instructions et quelques exemples dans le prompt atteint souvent un niveau suffisant. Si l'écart n'est pas net, le fine-tuning ajoute un coût de maintenance sans bénéfice.

Fine-tuning d'un LLM open source ou d'un modèle propriétaire ?

Les grands éditeurs proposent un fine-tuning hébergé chez eux : simple à lancer, mais vos exemples partent sur leurs serveurs et le modèle ajusté y reste. Un modèle open source (Mistral, Llama, Qwen) peut être ajusté puis exécuté sur une infrastructure européenne que vous contrôlez. C'est l'option que notre charte IA privilégie dès que les données sont sensibles : pseudonymisation avant tout envoi, hébergement dans l'Union européenne, architecture réversible.

Combien coûte un fine-tuning ?

Le calcul n'est pas le poste principal. Ce qui coûte, c'est la préparation des données (collecter, nettoyer, faire valider des exemples par le métier), l'évaluation, puis la maintenance : chaque fois que le modèle de base évolue ou que votre besoin change, il faut réentraîner et réévaluer.

C'est pourquoi nous ne chiffrons jamais un fine-tuning isolé. Nous chiffrons une tâche à automatiser, avec une mesure de qualité définie avant de commencer ; le fine-tuning n'est retenu que s'il bat les solutions plus simples sur cette mesure. Le prix dépend du périmètre, pas d'un taux journalier : chiffrage ferme 48 h après cadrage écrit.

Exemples concrets en PME

Classer les e-mails entrants

Un modèle compact ajusté sur l'historique de la boîte de support range chaque message dans la bonne catégorie et le bon service, à moindre coût qu'un grand modèle interrogé à chaque fois.

Rédiger au format maison

Comptes rendus, fiches produits ou réponses types qui doivent respecter une structure stricte : le fine-tuning fixe la forme, le RAG apporte les informations à jour.

Extraire les champs d'un document métier

Bons de commande, bordereaux, certificats : quand un modèle généraliste se trompe régulièrement sur un format propre au secteur, un jeu d'exemples relus par le métier peut corriger le tir.

Quand le fine-tuning vaut la peine (et quand l'éviter)

  • Oui, si la tâche est stable, répétée à grand volume et que le format de sortie compte autant que le fond.
  • Oui, si vous voulez remplacer un grand modèle coûteux par un petit modèle ajusté, exécutable sur votre propre infrastructure.
  • Non, si le besoin est de répondre à partir de documents qui changent : c'est le terrain du RAG.
  • Non, si vous ne disposez pas d'exemples relus par le métier : sans données de qualité, le fine-tuning apprend surtout vos erreurs.
  • Non, tant que de meilleures instructions et quelques exemples dans le prompt n'ont pas été essayés et mesurés.
FAQ

Questions fréquentes

Fine-tuning se traduit par « réglage fin », « ajustement fin » ou « affinage ». Le terme désigne le fait de poursuivre l'entraînement d'un modèle déjà entraîné, sur des exemples propres à une tâche, pour adapter son comportement.

Pas de façon fiable. Le fine-tuning apprend surtout une manière de répondre. Pour qu'une IA s'appuie sur le contenu de vos documents, et cite ses sources, le RAG reste la bonne approche.

Non, il vient après. On commence par des instructions précises et des exemples dans le prompt ; on ne passe au fine-tuning que si une mesure montre que cela ne suffit pas.

Cela dépend de l'endroit où le fine-tuning a lieu. Ajuster un modèle open source sur une infrastructure européenne garde les exemples et le modèle sous votre contrôle ; un fine-tuning hébergé chez un éditeur implique de lui confier ces données. Le choix se fait au cadrage, avec votre référent RGPD.

Service associé

Découvrez comment nous utilisons cette technologie pour transformer votre entreprise.

Voir le service

Décrivez votre projet — devis sous 24 h

Réponse personnelle d'un expert, sans engagement.

Réserver 30 min

Besoin d'aide pour implémenter ?

Nos experts vous accompagnent de la théorie à la pratique.

Discuter avec un expert

Réservez 30 min — sans engagement

Vous préférez en parler de vive voix ? +33 6 32 93 97 18