Önce default isim tabanlı vhost oluşturun. O IP'yi ServerName yönergesinde kurun ve Deny from all kullanın o vhost bloğunda. Bazı tanımlamaları ilk kez duyuyor olabilirsiniz ama göründüğü kadar karmaşık değil.