Bloqueo de visitantes que acceden por la dirección IP del servidor

Mi dirección IP del servidor Apache es 192.168.1.100 y el nombre de dominio es test.local.

• Si un usuario escribe en la URL, diga " http: //test.local ", entonces se les debe permitir.
• Si un usuario intenta acceder a " http://192.168.1.100 ", entonces debe ser denegado.

¿Cómo puedo lograr esto?

Lo que desea hacer es un alojamiento virtual basado en nombres , por lo que creo que algo en este sentido lo ayudará a comenzar:

NameVirtualHost *:80
<VirtualHost *:80>
  <Location />
  Order deny,allow
  Deny from all
  </Location>
  # other configuration for default host...
</VirtualHost>

<VirtualHost *:80>
  # This is the one you would like visible
  ServerName test.local
  <Location />
  Order deny,allow
  Allow from all
  </Location>
</VirtualHost>

(Tengo un poco de prisa, por lo que incluso podría haber errores tipográficos allí, lo siento).