htaccessten veya wordpress temada 404.php oluşturup gerekli yönlendirmeleri yapabilirsin.