Si no queremos que los motores de busqueda como Google indexen nuestro sitio web porque por ejemplo estamos en la fase beta de un proyecto podemos modificar el archivo robots.txt que se encuentra en la raíz del sitio web o crearlo poniendo lo siguiente:
User-agent: * Disallow: /
Con esto todo nuestro sitio web está bloqueado.
gracias por la yuda
Gracias a ti Dylan!
Un saludo, Víctor