• 17-08-2024, 01:07:37
    #1
    Merhaba Arkadaşlar,
    5 gün önce wordpress blog xenforo forum' un olduğu siteyi kurdum şimdi robots.txt içeriği nasıl olmalı. ve Google Webmaster Tools üzerinden 2 ayrı mülkmü açmalıyım. sitemap dosyaları tanımlı olması ve 1 hafta olmasına rağmen sıfır index aldı nasıl bir yol izlemeliyim.
  • 17-08-2024, 01:14:18
    #2
    User-agent: * Disallow: /wp-admin/
    Disallow: /wp-admin/admin-ajax.php
    Sitemap: https://teknolojist.net/wp-sitemap.xml
    Sitemap: https://teknolojist.net/sosyal/sitemap.php
  • 17-08-2024, 01:40:35
    #3
    Xenforo için ;

    User-agent: PetalBot
    User-agent: AspiegelBot
    User-agent: AhrefsBot
    User-agent: SemrushBot
    User-agent: SemRush
    User-agent: DotBot
    User-agent: MauiBot
    User-agent: MJ12bot
    Disallow: /
    
    User-agent: Amazonbot
    Disallow: /threads/*/reply
    
    User-agent: *
    Disallow: /whats-new/
    Disallow: /account/
    Disallow: /members/
    Disallow: /attachments/
    Disallow: /goto/
    Disallow: /help/
    Disallow: /posts/
    Disallow: /login/
    Disallow: /search/
    Disallow: /admin.php
    Allow: /
    
    Sitemap: https://domain.com/sitemap.xml
    WordPress için ;

    User-agent: *
    Allow: /
    Disallow: /cdn-cgi/
    Disallow: /*ref=* 
    Disallow: /*?ref=
    Disallow: /*replytocom
    Disallow: /*?replytocom
    Disallow: /*comment-page-1
    Disallow: /*comment
    Disallow: /*cid=
    Disallow: /*?cid=
    Disallow: /api/
    Disallow: /wp-admin/
    Disallow: /xmlrpc.php
    Disallow: /wp-content/languages/
    Disallow: /wp-content/mu-plugins/
    Disallow: /wp-content/upgrade/
    Disallow: /ajax/ 
    Disallow: /*?cache_refresh=1*
    Disallow: /*?s=* 
    Allow: /wp-content/plugins/
    Allow: /wp-content/themes/
    Allow: /wp-includes/
    Allow: /wp-content/uploads/ 
    
    Sitemap: https://domain.net/sitemap_index.xml 
    Sitemap: https://domain.net/feed
    Sağlıklı olanlar olacaktır.

    Diğer sorum; XenForo ve WordPress birbirine bağlı mı yoks aayrı ayrı klasörlerde mi yaşıyorlar ?