三robots协议的设置robots协议其实就是个文本文件，搜索引擎蜘蛛来访问网站的时候，会优先访问robots文件，从中得知本网站的什么文页面是可访问，什么页面是不可访问的，让蜘蛛有效的访问四网站地图sitemap的制作seo网站sitemap地图会给蜘蛛提供一个框架，让蜘蛛更快更有效的访问网站页面，蜘蛛会从...