Volver a Herramientas Gratis

Generador de Robots.txt gratis

El generador de archivos robots.txt gratis te permite producir fácilmente un archivo robots.txt para tu sitio web en función de las entradas.

robots.txt es un archivo que se puede colocar en la carpeta raíz de tu sitio web para ayudar a los motores de búsqueda a indexar tu sitio de manera más adecuada. Los motores de búsqueda como Google utilizan rastreadores de sitios web o robots que revisan todo el contenido de tu sitio web. Puede haber partes de tu sitio web que no quieres que se rastreen para incluirlas en los resultados de búsqueda de los usuarios, como la página de administración. Puedes añadir estas páginas al archivo para que se ignoren explícitamente. Los archivos robots.txt usan algo llamado Protocolo de Exclusión de Robots. Este sitio web genera fácilmente el archivo con las entradas de las páginas que se excluirán.


Predeterminado - Todos los robots están:

Rastreo-Demora:

Mapa del sitio:

Robots de búsqueda:


Google

Google Image

Google Mobile

MSN Search

Yahoo

Yahoo MM

Yahoo Blogs

Ask/Teoma

GigaBlast

DMOZ Checker

Nutch

Alexa/Wayback

Baidu

Naver

MSN PicSearch

Directorios restringidos:
La ruta se relaciona con la raíz y debe contener una barra inclinada final "/"












SEOptimer Report Preview

SEOptimer - Herramienta de informes y auditoría SEO.
Mejora tu sitio web. Gana más clientes.

Consigue una auditoría de sitio web gratis al instante