- Le prompt système est la configuration de base qui indique comment un LLM doit fonctionner, notamment le ton, l’usage des outils et les réglages liés aux connaissances externes
- Le prompt de Claude fait 16439 mots, 110 Ko, soit plus de 7 fois la taille du prompt de o4-mini de ChatGPT (2418 mots, 15,1 Ko)
- La partie définition des outils est la plus volumineuse et se compose d’informations récupérées depuis un serveur MCP
- Exemple : l’outil
web_search ne demande qu’un seul paramètre, "query", mais l’outil de recherche Google Drive est bien plus complexe, avec une description de 100 mots
- En plus des définitions d’outils, on y trouve aussi des consignes d’usage sur les citations (Citation), artefacts (Artifacts), recherche (Search) et les précautions liées à l’intégration Google
- Exemple : il y a des consignes répétées demandant de ne pas utiliser l’outil de recherche pour des informations déjà connues
- Le prompt contient aussi diverses consignes de hotfix destinées à compenser les faiblesses des LLM, notamment pour la résolution d’énigmes, la prévention des confusions d’information et l’amélioration des formulations poétiques
- On peut se demander avec quel logiciel Anthropic gère les versions de ce prompt complexe
- Vu la dispersion des nombreux hotfix, il n’est pas clair s’ils sont ajoutés en temps réel ou déployés après évaluation
- On peut aussi se demander à quel moment est prise la décision de tout abandonner et de réinitialiser avec un nouveau prompt
- Un prompt système d’une telle ampleur montre qu’un chatbot n’est pas simplement le modèle lui-même, mais un système composite façonné par la conception, les outils et l’accumulation de retours
- Le prompt système de Claude qui a fuité
- Le prompt système de Claude utilise plus de 24k tokens avec les outils
1 commentaires
Anthropic publie le « système de prompt » qui fait fonctionner Claude
Le système de prompt publié directement est de petite taille. Il semble que la partie liée aux outils en ait été retirée.