Algunos dueños de sitios web quieren o necesitan ocultar al público en general páginas que cumplen estos requisitos:
- sólo se puede llegar a ellas sabiendo de antemano la dirección
- no hay enlaces en ningún sitio web apuntando a esas páginas
- no están protegidas por contraseñas de ningún tipo
Imaginemos que un día creas una página y no pones ningún enlace hacia ella en ningún sitio; entonces le dices a tus amiguetes esa dirección para que vena las cosas tan graciosas que acabas de poner en ella (¿la foto del día en que te pillaron en el campo con los pantalones bajados haciendo aguas mayores?). En principio, tú piensas que esas páginas vana a estar a salvo de las miradas excesivamente curiosas. Pero un día descubres que tu foto ha sido publicada y aparece en todas las webs de fotos graciosas del mundo y quedas como un pamplinas hasta el día en que la foto llega a un compañero tuyo de trabajo y entonces quedas definitivamente como el hazmerreír de toda la empresa.
¿Cómo demonios se han enterado? ¿Quién me ha traicionado?
Lo más normal es que, en principio, nadie haya distribuido tu foto por ahí sino que hayan sido visitantes anónimos los que la hayan encontrado y repartido a diestro y siniestro. Si tú o cualquiera de los que han visitado la página tenían instalada la barra de herramientas de Google o de Yahoo (entre otras muchas) tu página ha sido añadida a las bases de datos de esos buscadores, revisada y puesta en el índice.
Cada uno de tus movimientos por la web es seguido por estas barras de herramientas y convenientemente anotado.
¿Cómo saber si una de mis páginas ha sido indexada por Google?
Entra en su página web y escribe "site:www.tudireccionaqui.com" (sin comillas) y obtendrás una lista de las páginas que el buscador ha indexado en tu sitio web. Si tienes más de mil páginas, te ofrecerá las 999 primeras.
¿Cómo evitar que mis páginas sean indexadas y añadidas al buscador?
Una de las opciones es desactivar las "capacidades avanzadas" de la barra de herramientas de Google, aunque así perderás la posibilidad de comprobar el PageRank de las webs que visites. Además, esta opción evita que se indexen las páginas que tú visitas pero no las que visiten otras personas que sí tengan la barra de Google con las "capacidades avanzadas" activadas.
Una segunda opción debería servir para que los buscadores no indexarán nunca tu página (al menos los buscadores honestos que siguen las reglas; añade a la cabecera de tu página (el HEAD, para entendernos):
- <meta name="robots" content="noindex,nofollow,noarchive">
- <meta name="robots" content="none">
- <meta http-equiv="cache-control" content="no-cache">
- <meta http-equiv="pragma" content="no-cache">
En principio, esto debería servir para que los buscadores no indexen tus páginas si tú no quieres pero, incluso, si tu página secreta tiene enlaces apuntando hacia otros sitios web, tu página aparecerá en estos otros sitios web como fuente del tráfico y volverá a ser detectada.
Como ves, Internet es un lugar totalmente abierto y es muy difícil proteger cualquier información "sensible" así que lo mejor es... no ponerla.
Vídeos sobre Caché, páginas privadas, contraseñas 
¿Cómo saber si una de mis páginas ha sido indexada por Google?
