Ahora, cree el archivo 'robots.txt' en su directorio raíz. Copia el texto anterior y pégalo en el archivo de texto.
Este es un Generador 100% online de fichero Robots.txt, con esto podrás automáticamente generar el contenido del fichero Robots.txt para elegir cómo deben comportarse los buscadores al entrar en tu web