LinuxParty

Hasta ahora, para decirle a cualquier buscador que nuestro sitio web dispone de un fichero 'Sitemap' y que puede utilizarlo para rastrear mejor nuestras páginas, teníamos que indicárselo explícitamenente. Por ejemplo, en Google a través de 'Google Sitemaps' (ahora conocido como 'Google Webmaster Tools') o en Yahoo! mediante este formulario. Sin embargo, a partir de hoy va a ser posible indicar cuál es nuestro fichero 'Sitemap' simplemente añadiendo su URL dentro del fichero 'robots.txt' de nuestro sitio web. Según se informa en 'sitemaps.org' (el sitio oficial del protocolo Sitemaps, que ha sido traducido al español), simplemente es necesario escribir esta línea dentro del fichero 'robots.txt':

Sitemap: https://www.midominio.com/ubicacion_del_fichero_sitemap.xml

Esta línea puede estar en cualquier parte del fichero, es independiente del 'user-agent' de los robots de los buscadores, y es importante indicar la ruta completa del Sitemap, sin olvidar escribir 'https://'.

Los cuatro principales buscadores (Google, Yahoo!, MSN Live Search y Ask.com) hablan sobre el tema en sus respectivos blogs (Google, Yahoo!, MSN Live Search, Ask.com), puesto que todos ellos (Ask.com en último lugar) se han unido para ser capaces de leer este estándar de comunicación entre webmasters y buscadores.

Fuente y continúa en Google.dirson.com