SiteCrawler hakkında hepimizi bilgilendirdiğin için çok sağol.
İlk soruyu da ben sorayım istedim. Ben sitemap oluşturmaya kalktığımda
senin de söyledeğin gibi -Check for cumston file-not-found pages. özelliğini seçili bırakıyorum ve ASP sitemde .html uzantılarını kullanabilmek için özel 404.asp hata sayfasını kullanıyorum. Ve sitecrawler sitemapi oluşturmaya başlamadan önce bununla ilgili bir pencere getiriyor. Bu sayfada 404.asp sayfasının kodları ve altındada bir metin kutusu bulunmakta. metin kutusunun yanında da bir ok butonu var. Burada ne yapmam gerektiğini çözemedim. metin kutusunu boş bırakarak sitemap oluşturduğumda da google Webmaster Toolsta da sitemi bir türlü doğrulatamadım. (404 hata sayfalarını kullanmadan önce bir sorun yaşamıyordum)
Ne yapmam gerektiği konusunda bir fikri olan varsa lütfen paylaşabilirmisiniz.
Şimdiden teşekkürler.