llms.txt, et combien lui faire confiance
L’idée, proposée par Jeremy Howard en 2024, est simple : un fichier markdown à /llms.txt qui indique à un modèle de langage quelles pages de ton site valent la peine d’être lues. Robots.txt dit ce que le crawler ne doit pas toucher ; llms.txt dit ce qu’il doit prioriser.
La position honnête sur l’adoption
Aucun grand fournisseur d’IA ne s’est engagé à le lire. Ceux qui te disent que llms.txt est indispensable pour la visibilité IA vendent quelque chose. Ce qui est vrai : l’adoption se répand sur les sites de documentation et outils dev, le fichier est statique et gratuit à servir, et si la convention tient, tu y es déjà.
C’est un pari peu risqué sur une convention plausible. Ça vaut dix minutes, pas un projet.
Ce qui fait vraiment bouger la visibilité IA
Dans l’ordre : laisser les crawlers d’indexation accéder à la page, puis structurer le contenu pour en extraire une réponse claire. Un fichier listant tes URLs ne sert à rien si OAI-SearchBot est interdit, ou si chaque section prend trois paragraphes pour aller au but.
Vérifie le premier avec le Vérificateur de crawler IA et le second avec le Vérificateur de visibilité AI aussi.
Fais-en une sélection
Nous générons à partir de ton sitemap car c’est la seule liste complète disponible, mais un sitemap vise l’exhaustivité alors que llms.txt vise la sélectivité. Vingt pages qui répondent vraiment valent mieux que quatre cents incluant ton archive de tags. Supprime généreusement et écris une vraie description en une ligne en haut.