网站地图有用吗?有用。网站地图不仅为搜索引擎爬虫(蜘蛛)提供了更便捷的索引入口和爬行路线,且增加了网页被收录的概率,更有益于网站收录。
什么是网站地图?网站地图(sitemap)指的是:针对搜索引擎爬虫设计的包含网站整体页面的html文件,简单的说就是一个导航页面,只不过这个页面是给爬虫看的,不是给用户看的。
网站地图位于网站根目录下,通常以“sitemap.xml”命名,少数情况下以“sitemap.html或sitemap.txt”命名。例如我的SEO博客网站地图地址为:https://www.seolove.com.cn/wp-sitemap.xml
举一个比较容易理解的例子,我们去超市买东西,如果超市没有路标和指示牌,顾客找东西就比较困难,但花点时间也能找到。如果有了路标和指示牌,就可以很轻松的找到。超市的路标和网站地图的功能类似,路标和指示牌是为顾客提供便利的,网站地图是为爬虫提供便利的。
其实就算没有网站地图,搜索引擎爬虫也能正常抓取网页内容,只是比较费力(绕路),绕来绕去还有可能迷路。当有了网站地图以后,搜索引擎爬虫就可以按照网站地图给出的路线轻松抓取网页URL,既节省了时间,又提高了效率。
小型站点是否需要网站地图?需要。有人认为小型站点(个人博客)不需要设置网站地图,因为小型站点页面数量有限,爬虫很容易抓取。这种说法看似合理,其实有些偏见。
事实上无论是大型站点,还是小型站点,都建议设置网站地图。就算小型站点网页数量很少,网站地图也能提高蜘蛛爬行效率,为搜索引擎节省了一定资源。