Generador de robots.txt

Deje en blanco si no tiene.

Google
Google Image
Google Mobile
MSN Search
Yahoo
Yahoo MM
Yahoo Blogs
Ask/Teoma
GigaBlast
DMOZ Checker
Nutch
Alexa/Wayback
Baidu
Naver
MSN PicSearch

La ruta es relativa a la raíz y debe contener una barra diagonal final "/".

Un generador de robots.txt es una herramienta que ayuda a los webmasters a crear y personalizar un archivo robots.txt para su sitio web. Este archivo indica a los robots de los motores de búsqueda (como Google y Bing) cómo rastrear e indexar el sitio web, y proporciona instrucciones sobre qué páginas evitar o ignorar.

Al utilizar un generador de robots.txt, los webmasters pueden crear rápidamente un archivo personalizado adaptado a las necesidades de su sitio web, con sólo unos pocos clics. El archivo robots.txt generado se puede cargar en el directorio raíz del sitio web, lo que permite a los rastreadores de los motores de búsqueda encontrarlo y leerlo fácilmente cuando visitan el sitio.