Evet.
mysql_query("SET NAMES 'utf8'");
mysql_query("SET CHARACTER SET utf8");
mysql_query("SET COLLATION_CONNECTION = 'utf8_turkish_ci'");
Öyleyse excele yazdırdığınız sınıfla ilgili olabilir. Ben PhpSpreadsheet kullanıyorum eğer onu kullanmıyorsanız deneyin bence eğer onu kullanıyorsanız yalnış hatırlamıyorsam charset ayarı olması gerek.