llms.txt generator

llms.txt dosyası ve ona ne kadar inanmalı

Jeremy Howard tarafından 2024'te önerilen fikir basit: bir markdown dosyası /llms.txt bir dil modeline sitendeki hangi sayfaların okunmaya değer olduğunu söyler. Robots.txt tarayıcının dokunamayacağını belirtirken; llms.txt öncelik vermesi gerekeni belirtir.

Benimseme konusundaki dürüst tutum

Hiçbir büyük AI sağlayıcısı bunu okumayı taahhüt etmedi. Sana llms.txt'nin AI görünürlüğü için gerekli olduğunu söyleyen biri bir şey satıyor. Doğru olan: benimseme dokümantasyon siteleri ve geliştirici araçları arasında yayılıyor, dosya statik ve sunması ücretsiz, ve eğer bu gelenek devam ederse zaten oradasın.

Mantıklı bir gelenek üzerine ucuz bir bahis. On dakikaya değer, bir projeye değil.

Gerçekten AI görünürlüğünü artıran şey

Sırayla: erişim tarayıcılarının sayfaya ulaşmasına izin vermek, sonra içeriği temiz bir cevabın çıkarılabileceği şekilde yapılandırmak. URL'lerini listeleyen bir dosya işe yaramaz eğer OAI-SearchBot yasaklanmışsa ya da her bölümün amacına ulaşması üç paragraf sürüyorsa.

İlkini ile kontrol et AI tarayıcı kontrolü ve ikincisiyle AI görünürlük denetleyicisi ayrıca.

Düzenle

Sadece mevcut tam liste olduğu için sitemap'inden üretiyoruz, ama sitemap tamamlamayı hedeflerken llms.txt seçiciliği hedefler. Gerçekten bir şeyi yanıtlayan yirmi sayfa, etiket arşivini içeren dört yüz sayfadan iyidir. Cömertçe sil ve en üste gerçek bir satırlık açıklama yaz.

Sık sorulan sorular

llms.txt nedir?

Jeremy Howard tarafından 2024'te önerilen bir standart: /llms.txt yolunda markdown formatında, sitendeki en okunmaya değer sayfaları listeleyen bir dosya. Böylece dil modeli siteni tararken gezinme, çerez bannerları ve altbilgilerle uğraşmadan içeriğe ulaşabilir.

Yapay zeka şirketleri gerçekten okuyor mu?

Güvenilir değil ve bunu açıkça söylemek önemli. Hiçbir büyük yapay zeka sağlayıcısı llms.txt'ye uyacağını taahhüt etmedi. Benimseme dokümantasyon siteleri ve geliştirici araçları arasında artıyor ve maliyeti sadece statik bir dosya. Bunu bugün ölçülebilir getirisi olan bir şey değil, düşük riskli bir deneme olarak gör.

Dosya nereye konur?

Alan adının kökünde: https://example.com/llms.txt. Bazı siteler ayrıca önemli sayfaların tam metnini içeren llms-full.txt dosyasını da yayınlar.

Neden sadece ilk 100 URL?

Çünkü faydalı bir llms.txt kapsamlı değil, seçici olur. 4.000 URL'lik bir site haritası dökümü amacını bozar - dosya hangi sayfaların önemli olduğunu belirtmek için vardır. Bizim oluşturduğumuz taslağı başlangıç olarak al ve kısalt.

Bu bir site haritasıyla aynı mı?

Hayır. Site haritası arama tarayıcıları için XML formatındadır ve kapsamlı olmaya çalışır. llms.txt ise dil modelleri için markdown formatındadır ve seçiciliği hedefler, ayrıca sitenin ne olduğu ve belirli sayfanın neden önemli olduğu hakkında açıklama alanı bırakır.