Arkadaşım yukarıda söylediğim gibi, sadece isim göstereceğin yere substr li halini yaz:
<?php
$isim = substr($resim[$i], 0, -4);
echo '<div class="resimdiv"><a href="'.$dizin.'/'.$resim[$i].'" target="_blank"><img src="'.$dizin.'/'.$resim[$i].'" alt="'.$isim.'" border="0" class="resim" width="150px" height="200px" /></a><br />' .$isim. '</div>';
?>
gibi.