¿Cómo encuentra Google un dominio sin enlaces a él?

Recientemente registré un nuevo dominio, lo apunté a mi servidor existente y configuré una página mínima que decía "prueba" y nada más.

¡Acabo de descubrir esta noche que la página ya está indexada en Google! No hay enlaces al sitio (ni siquiera le he dicho a nadie sobre el dominio ya que aún no he hecho nada con él).

¿Google está rastreando registros de WHOIS o algo así?

search-engine-indexing domain-registration web-crawlers

— Cabra descontento
fuente

¿Está seguro de que no hizo algo que podría exponer automáticamente la URL de alguna manera, como mencionarlo en un correo electrónico a una lista (que podría volver a publicarse), navegar directamente desde allí a otro sitio que pueda tener registros públicos? o un widget de referencia, etc.?

— Su '

@Su no que yo sepa. Apenas visité el sitio después de que lancé la página de prueba.

— DisgruntledGoat

@TRiG Ya he mencionado que existe la misma pregunta, pero no hay una respuesta perfecta, así que pregunté.

— sheshadri

Sin embargo, no hiciste nada para hacer esta pregunta diferente. Es exactamente la misma pregunta.

— TRiG

@TRiG Sí, la pregunta es la misma, pero en esa pregunta no hay una respuesta perfecta.

— sheshadri

Respuestas:

Son un registrador . No veo por qué no pudieron usarlo para encontrar nuevos sitios para indexar.

— John Conde
fuente

¡Ja, me encanta el párrafo de ese artículo que dice que están haciendo un navegador web y un sistema operativo! De todos modos, su respuesta parece lógica: para ser un registrador debe tener acceso completo a todos los dominios que se han registrado.

— DisgruntledGoat

Hay al menos 3 formas:

Enlaces a su sitio.
Uso de las Herramientas para webmasters de Google (ahora llamado Search Console)
Registros volcados, desencadenantes y otras opciones.

Google encontrará muchos sitios nuevos rápidamente de algunos registradores. Por ejemplo, Google encontró un nombre de dominio que registré usando GoDaddy, lo indexó y comenzó a enviar resultados de búsqueda dentro de los 20 minutos posteriores al registro del nombre de dominio. Pero esto no sucederá para todos los registradores.

Puede haber otras formas también, pero estas son las más comunes.

Si desea que Google conozca su sitio rápidamente, la mejor opción es enviarlo utilizando las Herramientas para webmasters de Google (ahora llamadas Search Console).

@zigojacko trajo un gran punto (!) en los comentarios que realmente deberían estar dentro de la respuesta. Si tiene una cuenta de Google+, simplemente puede vincular a su sitio web y Google lo respetará de inmediato. ¡Es al menos tan rápido como crear una cuenta WMT si no más rápido!

[Insinuación]

Los mapas de sitio y los archivos robots.txt no tienen nada que ver con el descubrimiento de dominios. De hecho, los mapas de sitio son inútiles para la mayoría de los sitios con la excepción de sitios extremadamente grandes, sitios que no se pueden rastrear por completo porque no todas las páginas están vinculadas, sitios con un muro de pago o sitios con inicio de sesión. Los sitemaps no tienen nada que ver con el rendimiento de la búsqueda, salvo las razones mencionadas anteriormente. Además, siempre es recomendable crear un archivo robots.txt incluso si está vacío.

— closetnoc
fuente

@sheshadri en cualquier momento !! Estamos aquí para usted y tenemos algunos verdaderos expertos aquí. Este es un sitio al que Google y otros sitios autorizados prestan atención y responden.

— closetnoc

@sheshadri Muchos registradores más grandes comparten nueva información de registro con Google casi en tiempo real.

— closetnoc

Para agregar una idea más a la mezcla, además de la respuesta correcta de @ closetnoc es vincular al sitio web desde Google+. Esto parece desencadenar algo en Google para enviar una visita de Googlebot muy rápido, a veces tan rápido como en una hora, aunque algunos son más largos.

— zigojacko

Google también es un registrador de dominios, por lo que supongo que como registrador deben tener acceso a todos los dominios que se han registrado.

— Max

@zigojacko ¡Gran punto! A menudo me olvido de Google+ porque no hago lo social.

— closetnoc

-1

Si usa la barra Google y tiene activada la información de Clasificación de la página, informará a Google sobre la URL de la página (para obtener el número de Clasificación de la página) y esto puede hacer que su página se indexe.

— mawtex
fuente

No, no uses esto ni nada similar.

— DisgruntledGoat

Uno no tiene nada que ver con el otro. La base de datos de la barra de herramientas y la base de datos de búsqueda están completamente separadas por completo. La base de datos de la barra de herramientas se actualiza desde los agentes agregados.

— closetnoc

Sin mencionar que Google TBPR ha sido anulado durante años de todos modos, por lo que probablemente ya no haga nada en lo más mínimo.

— zigojacko