效地抓取网站内容，并找到可能与网站其他内容没有相互链接的URL。Sitemaps协议是对codice_1的补充。 
历史.Google于2005年6月宣布正在进行一项名为的实验，以知识共享许可协议发布了免费的，同时发布了一个Python的开源客户端，用于生成常见的一些Sitemaps。Sitemaps发布后，即被包括维基媒体基金会下属站点在内的许多网站采用。2006年11月，Google、雅虎和微软的Live Search宣布支持，Sitemaps成为第一个改进搜索引擎爬网过程的联