Indexación
Hasta ahora era difícil entender cómo es que Google Sitemaps tenía una herramienta para analizar el estado de los ficheros robots.txt, pero no una que permita crear o guardarlos. Sin embargo, y seguro que a requerimiento de los usuarios, Google Webmaster Tools acaba de lanzar una herramienta que nos permite crear los archivos robots.txt fácilmente y comprobar así, que nuestro sitio es accesible por todos los buscadores, o sólo por aquellos que permitamos.
Para acceder a la herramienta, hay que Iniciar sesión en GWT -> Ingresar en el dominio respectivo -> Menú Herramientas -> Generar archivo robots.txt.
La herramienta es muy intuitiva y fácil de manejar. Luego de descargar el archivo robots.txt, no olviden subirlo al directorio raíz de su site.
Artículo relacionado: Generador de robots.txt
Recientemente se ha anunciado la posibilidad de indicar, a los buscadores como Google, donde se encuentra ubicado el sitemap.xml de nuestro sitio web. Según se comentó basta con añadir la siguiente linea.
Sitemap: http://www.baluart.net/sitemap.xml
Sin embargo, luego de haber realizado esto. Uno se percata que Google no reconoce el fichero robots.txt, aparece un error en él.
En quickonlinetips, nos cuentan que esto les sucedió y que para solucionar el problema hay que dejar una línea en blanco; separando la ruta del sitemap, del resto del contenido.
