Hola necesitas incluir un archivo robots.txt
esto evitara que los robots de los buscadores incluyan cierto contenido de tu web
en dicho archivo deberas poner lo siguiente
Código:
User-agent: * (esto significa que todos los robots existentes ignoraran el contenido especificado)
Disallow: /directorio/
Disallow: archivo.html
puedes obtener mayor informacion de la siguiente página
http://www.webtaller.com/google/guia_robots.php
Nos vemos espero te sirva