TokenLab

Outils de code

Choisir un modèle pour les agents de codage

Comparez les modèles de codage en fonction du travail, du contexte, de la vitesse et du budget qui vous importent

Il n'existe pas de modèle de codage unique idéal. Un modèle excellent pour un petit correctif peut être inadapté à un changement à l'échelle d'un dépôt, et les résultats des classements ne permettent pas de prédire avec précision sa capacité à suivre vos propres instructions et à utiliser vos outils.

Utilisez la page Modèles pour obtenir les ID de modèles actuels, les limites de contexte, les formats d'API et les tarifs TokenLab. Ne copiez pas une liste de recommandations permanente dans votre configuration.

Adapter le modèle à la tâche

TravailCe qui compte le plus
Petites modifications et autocomplétionRéponses rapides, faible coût, suivi fiable des instructions
DébogageLecture conjointe des journaux et du code, test d'hypothèses, respect du périmètre
Revue de codeDétection de défauts concrets sans inonder la revue de spéculations
Refactorisations importantesContexte suffisant, changements cohérents entre les fichiers et utilisation efficace des outils
ArchitectureCompromis clairs, preuves issues du dépôt et bon raisonnement long

Utilisez un contexte plus restreint pour un travail ciblé, même si le modèle prend en charge une fenêtre très large. Un contexte plus important coûte plus cher et peut masquer le code pertinent.

Comparer les candidats sur vos propres tâches

Choisissez quelques tâches réelles représentatives de votre travail. Donnez à chaque candidat le même état de dépôt, les mêmes instructions, les mêmes outils et la même limite de temps. Comparez :

  • si le changement est correct et complet
  • les tests réussis et les régressions introduites
  • les fichiers ou le code modifiés inutilement
  • le nombre total de tokens et le coût final TokenLab
  • le temps nécessaire pour obtenir un résultat utilisable
  • la fréquence à laquelle une personne a dû corriger l'agent

Conservez les résultats par type de tâche. Un modèle peut être votre meilleur relecteur tandis qu'un autre sera plus performant pour l'implémentation ou les modifications rapides.

Rendre les changements de modèle visibles

Définissez le modèle explicitement dans l'outil de codage. Si votre application propose une solution de repli (fallback), informez l'utilisateur lorsque le modèle change. Une solution de repli peut avoir un prix, une limite de contexte, un format d'outil ou un style de sortie différents.

Le format de l'API a également son importance :

Besoin de l'outil ou du modèleFormatURL de base
Chat compatible OpenAIChat Completionshttps://api.tokenlab.sh/v1
Événements de réponse ou outilsResponseshttps://api.tokenlab.sh/v1
Fonctionnalités Claude MessagesAnthropic Messageshttps://api.tokenlab.sh
Contenu et outils GeminiGeminihttps://api.tokenlab.sh

Vérifiez accepted_request_formats pour le modèle sélectionné au lieu de déduire le format à partir de son nom.

Guides des outils de codage

Pour le contrôle des coûts, les clés API distinctes et la comparaison de l'utilisation, poursuivez avec Contrôler les coûts des agents de codage.

Sur cette page