llms.txt, e quanto crederci
L'idea, proposta da Jeremy Howard nel 2024, è semplice: un file markdown in /llms.txt che indica a un modello linguistico quali pagine del tuo sito vale la pena leggere. Robots.txt dice cosa un crawler non può toccare; llms.txt cosa deve prioritizzare.
La posizione onesta sull'adozione
Nessun grande fornitore AI si è impegnato a leggerlo. Chi ti dice che llms.txt sia necessario per la visibilità AI sta vendendo qualcosa. La verità: l'adozione si sta diffondendo tra siti di documentazione e strumenti per sviluppatori, il file è statico e gratuito da servire, e se la convenzione si mantiene, ci sei già.
È una scommessa economica su una convenzione plausibile. Vale dieci minuti, non un progetto.
Cosa muove davvero la visibilità AI
In ordine: permettere ai crawler di recupero di raggiungere la pagina, poi avere contenuti strutturati in modo che si possa estrarre una risposta chiara. Un file con i tuoi URL non serve a nulla se OAI-SearchBot è vietato, o se ogni sezione impiega tre paragrafi per arrivare al punto.
Controlla il primo con il Controllo crawler AI e il secondo con il Controllo visibilità AI anche.
Curalo
Lo generiamo dalla tua sitemap perché è l'unica lista completa disponibile, ma una sitemap punta alla completezza mentre llms.txt punta alla selettività. Venti pagine che rispondono davvero battono quattrocento che includono il tuo archivio tag. Cancella con generosità e scrivi una vera descrizione in una riga in cima.