Hocam görev yöneticisinde görünmeyen cache, standby memory veya çalışan servisler RAM kullanımını yükseltebilir. 4 GB RAM Windows Server için zaten oldukça sınırda.
Resource Monitor veya RAMMap ile neyin kullandığına bakmanızı öneririm. Ayrıca Windows Update, Defender/antivirüs, mssql/iis gibi servisler varsa onlar da ciddi ram tüketiyor.