Google Search Console'den robots.txt kontrolünü sağlayınız. Googlebot vs diger botlari check ettirin.