Ajan tabanlı tarama, llms.txt olarak geçiyor robots.txt benzeri düşünebilirsiniz. Yapay zekalara siteyle ilgili bilgi vermek için kullanılıyor mutlaka siz de kullanın öneririm.