Indica a los buscadores qué rastrear. Copia el resultado en un archivo robots.txt en la raíz de tu sitio.