AI agentlar şu anda siteleri görebiliyor default olarak.
Siz eğer engellerseniz ancak o vakti tarayamaz, sitenizden bilgi alamazlar.
Sadece bu yapay zeka araçlarının sitenizi daha iyi tanımlayabilmesi için bir llms.txt dosyası hazırlamanız faydalı olur.
Bu önemli bir veri aslında çoğu Web sitenin bundan haberi var mıdır bilmiyorum belki wordpress seo eklentileri kullananlar için otomatik olusturuyordur.