Disallow: /cgi-bin
Disallow: /wp-includes
Disallow: /wp-content

Bunlara gerek yok ve pagespeed gibi analizlerde bazı hatalara neden olur.

Allow: /wp-admin/admin-ajax.php ayrıca buna izin verilmesi gerek.

Klasik dosya yeterlidir esasında.

User-agent: *
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php

Sitemap: https:siteadresxml