Google, Yahoo und Microsoft haben sich nun darauf geeignet, das von Google entwickelte SiteMap-Verfahren gemeinsam zu verwenden. Mit einer speziellen Datei kann hier der Webmaster den Suchmaschinen alle Seiten seiner Webpage mitteilen und so den Crawler unterstützen.

Durch die gemeinsame Unterstützung der Sitemaps durch die 3 führenden Suchmaschinen wird die Google-Sitemap zum Quasi-Standard erklärt. Unter sitemaps.org wurde eine eigene Website eingerichtet, die das Verfahren, sowie auch die Creative Commons-Lizenz erklärt.

Mit den Sitemaps können Webmaster den Crawler der Suchmaschinen über bestimmte Meta-Informationen, wie z.B. die Aktualisierung der Seiten, informieren.

Links:
Google-Pressemitteilung
Sitemaps.org