sitemap.xml

Sitemaps协议使网站能够告知搜索引擎网站中可供抓取的网址，以便于搜索引擎google等更方便地抓取网站。而sitemap.xml是遵守该协议的包含了一个网站所有链接的xml格式文件。 sitemap.xml文件可以手工编写，也可以通过软件自动生成，比如通过小爬虫在线生成工具。 sitemap.xml文件创建好了之后可以提交给各个搜索引擎。