Bunu eklentisiz manuel olarak yapmak isteyen arkadaşlar
<?php if(is_404()) {?> 
<?php echo '404 başlığı buraya gelsin.'; ?>
<?php } else { ?>
<?php wp_title ?>
<?php } ?>
bu şekilde ilkel yöntemle de yapabilir.