sitemap也就是网站地图,是一个网站所有链接储存的地方。sitemap便于蜘蛛抓取网站页面,更加清晰的了解网站的结构层次。一般存放在根目录下。
sitemap的作用:
1.便于蜘蛛浏览整个网站,更清晰的体现出网站的整体结构。
2.为蜘蛛提供一些指向动态页面或采用其他办法难以访问的页面。
3.加速爬取速度与收录,有利于网站优化工作。
4.如果用户访问网站内并不存在的链接,那么这个访问者就会转到“无法找到文件”的错误页面,但sitemap可以作为该页面的“准”内容。
网站地图的制作方法:
可以借助小爬虫网站地图生成工具:http://www.sitemap-xml.org。使用方法如下:
1)输入域名,选择网站对应的编码,点击“生成”按钮;
2)等待小爬虫爬行网站,爬行时间根据网站内容多少和服务器访问速度不定,如果数据较多,则建议避开高峰期;
3)下载sitemap.xml或者sitemap.html文件,上传到网站根目录,在首页做链接;
需要说明一下sitemap.xml和sitemap.html文件的区别:
sitemap.xml文件的创建是为了更利于搜索引擎的爬取,提高优化效率,生成sitemap.xml文件后将其链接放入robot.txt文件内。提示:良好的robort.txt协议可以指引搜索引擎抓取方向,节省蜘蛛抓取时间,所以无形中提升了蜘蛛的工作效率,也就提升了页面被抓取的效率。
将sitemap.xml和robort.txt文件放在网站的根目录下。
sitemap.html格式的网站地图主要是用来方便用户的浏览,并不能起到sitemap.xml所起的作用。所以最好两者都要有。
4)登录百度站长平台,点击“链接提交”,填写sitemap.xml对应的URL地址,如图所示:
提交成功后,蜘蛛会对我们的网站进行抓取。添加网站能加速网站内容收录速度,提升网站收录。但是这是建立在网站内容符合搜索引擎标准的基础上,如果网站内容质量太差,使用sitemap也难以达到效果。以上就是制作sitemap的一些分享了,希望对大家有帮助哦。