Motivos

 Motivos por los que los motores de búsqueda no pueden indexar  algunas página:

  • Documentos o información oculta: Pdfs que no se encuentran en las páginas indexadas, listas de datos no públicas (sobre todo los ciber-criminales).
  • Web contextual: páginas cuyo contenido varía dependiendo del contexto (por ejemplo, la dirección IP del cliente, de las visitas anteriores, etc.). 
  • Contenido dinámico: páginas dinámicas obtenidas como respuesta a parámetros, por ejemplo, datos enviados a través de un formulario.
  • Contenido de acceso restringido: páginas protegidas con contraseña, contenido protegido por un Captchat, etc.
  • Contenido No HTML: contenido textual en archivos multimedia, otras extensiones como exe, rar, zip , etc.

Comentarios