site yapılandırma altında ingilizcesi crawler access olan yer var robots.txt yi incelediğin yer. Orda neler var , bot erişebiliyor muymuş siteye?