Sen elementin :hover scopuna transition vermişsin ondan dolayı kaynaklanıyor.

element{
     transition:transform 1s;
}
element:hover{
     transform: scale(1.3);
}

gibi düzenleme yaparsan, mouse üzerinden çıktığında da aynı şekilde geri dönüş yapacaktır.