Webs invisibles
Les contaba el otro día sobre las palabras más buscadas en internet, en Google en realidad. Y leía hoy sobre aquellos sitios que no son indexados (es decir, agregados en los motores de búsquedas) por ningún buscador. Esos sitios quedan inexistentes para los navegantes y comienzan a ser parte de la “web invisible“. Muchas veces se trata de bases de datos las que no son registradas.
Los motores de búsqueda utilizan unas arañas para recolectar información de los sitios, y lo cierto es que no recolectan todo el material disponible. De hecho indexan muy poco. El término en inglés es “Deep web”, acuñando en 1996. También hay sitios que por alguna razón no desean ser indexados (sería un anti - SEO) y hay herramientas para ocurra.
Más sobre el tema en los siguientes artículos:
Invisible Web Directory (en inglés)
¿Qué es la web invisible?
Definición y más data sobre el tema (wikipedia, en inglés).
Otro artículo sobre el tema (éste sí en español).
