/// DESIGN-ROOT /// Diseño, usabilidad y animación web

No, que el título no os confunda. No se trata de eliminar de internet la web de la competencia para que el robot Google no la rastree, pero sí de evitar que Google rastree un directorio de nuestro sitio web.

Para ello, tienes que crear un fichero llamado robots.txt, y dejarlo en el directorio raíz de la forma 'http://www.design-root.com/robots.txt'.

Este fichero debe contener lo siguiente:

User-agent: googlebotDisallow: /mi_directorio/

Otra opción es escribir dentro de cada página web que quieres excluir de Google, y en la zona 'HEAD', el siguiente código:

META NAME="googlebot" CONTENT="noarchive,nofollow"