站点地图是网站管理员向搜索引擎通报网页的一种简单方法 他们的网站可供抓取。在最简单的形式中，站点地图是 一个 XML 文件，其中列出了网站的 URL 以及有关每个 URL 的其他元数据 URL（上次更新时间、通常更改频率以及重要性 是相对于网站中的其他 URL），以便搜索引擎可以更智能地 抓取网站。Web 爬虫通常会从网站内的链接和其他网站中发现页面。 站点地图会补充这些数据，以允许支持 Sitemaps 的爬虫获取数据 Sitemap 中的所有 URL，并使用关联的元数据了解这些 URL。
数据统计
相关导航
暂无评论...