Archivo Robots.txt
Robots.TXT
Lo que hay que saber sobre el archivo Robots.txt

Generador Robots.txt


Crea tu archivo Robots.txt fácilmente con esta herramienta.


Cómo crear tu archivo Robots.txt con el generador

1. Selecciona qué quieres que hagan los robots por defecto.

Si deseas dar permiso para indexar el sitio a todos los robots, o si por el contrario, no quieres que tu sitio sea indexado (muy útil si es un sitio muy nuevo y no quieres que los motores de búsqueda lo indexen todavía).


2. Reglas adicionales

2.1. Si has seleccionado Bloquear todos los robots en el paso 1:

¿Hay algun directorio o archivo que sí quieres que rastreen los motores de búsqueda? Especifica cuáles añadiendo Reglas adicionales.

2.2. Si has seleccionado Permitir todos los robots en el paso 1:

¿Hay algun directorio o archivo que no quieres que rastreen los buscadores? Especifica qué carpetas o ficheros añadiendo Reglas adicionales

 

Acceso por defecto


 

Reglas adicionales

Acción Robot Directorio o archivo

Debería empezar con "/"

 

Sitemap XML (opcional)

 

Su archivo Robots.txt


Te puede interesar

 



© 2017 RobotsTXT.pro Contact & Privacy Contact

eXTReMe Tracker