Katılmıyorum. Eğer sunucunuz veya teknik optimizasyonunuz çok çok kötü değilse SEO eklentisi bu tarafta size bir yavaşlık katmayacaktır.
Ne kullandığınıza göre de değişir tabii.