百度在12月14日发布了关于清理网站陈旧sitemap文件的通知，具体内容如下：

由于部分站点存在大量陈旧sitemap文件，严重影响资源平台整体抓取运行效率，平台预计从12月14日起陆续清理历史老旧sitemap文件，以便新增、优质资源能够更快进入搜索，为用户营造鲜活健康的内容生态。本次清理不影响搜索对网站的自然发现及展现权重。

结合百度VIP俱乐部等情况来看，以后中小网站获得提交sitemap的权限也是越来越难，百度大有舍弃小站保留“权威”大站的趋势。与其去关注那些没有权威性的小站，不如更多展示大站内容，起码这些大站相对更加靠谱！估计很多人也会这么想！

事实上，这个问题也得具体分析，通常小站的内容本身就不多，sitemap里面的内容早就已经抓取了，在更新频率和更新量跟不上的情况下，清理这些sitemap文件是可以理解的。而那些大站每天的更新量大，有必须多更新sitemap文件。

在说百度VIP俱乐部的时候就提到，在当前百度的大环境里面，中小网站的生存的确更加困难！收回“快速收录”权限不说，这回sitemap文件也要被清理了！

我们回头看看、想想，不难发现百度搜索早就开始走这个路子了！最开始的熊掌号、后面的快速收录、再后来的专业问答等等，然后又收回各种权限，这一些系列的操作其实都在给“行业大站”提供便利，给中小网站制造更高的门槛。

客观上说，某些受益的大站还是靠谱的，它们的确能够提供更加专业的内容，但也有很多享受这些权益的大站名不副实！比如说很多大站的内容其实是找人代写的伪原创，比如有些大站直接使用AI来写作，甚至有些还直接大量采集，这些内容更本就配不上“优质”二字！但百度搜索在这个问题的处理上，实在差强人意！

也正因为如此，作为专业的SEO人员，要看到如今的网站优化依旧有很多可以操作的地方！当然，具体怎么做，就不细说了，大家自行理解吧。但不管怎样，请大家以优质内容为基础，哪怕是伪的优质内容！

最后，sitemap文件的作用没有那么大，网站被收回权限以及被清除sitemap文件，其影响也相对很小的！

sitemap网站地图需要每天都提交吗？sitemap不需要每天都提交，因为搜索引擎蜘蛛会不定期来抓取，这个时间会根据网站的具体情况而定。权重高的网站蜘蛛抓取sitemap的速度会快，反之如果网站权重低，那抓取就没有那么频繁。

事实上，即便每天把sitemap提交上去，搜索引擎也不会及时来抓取！大家在提交的时候应该能看到，系统会显示待抓取状态。

另外还有个问题，蜘蛛在抓取sitemap的时候，会分析sitemap里面的URL链接是否已经被抓取过，理论上蜘蛛会优先抓取那些没有被抓取过的链接，所以频繁提交也是没有用的。

有朋友说，可以改版sitemap的名称，然后再提交，这样搜索引擎就会当成新文件来分析和抓取了！笔者认为这种方式不可取，因为这样就等于频繁提交重复的链接，这会影响到蜘蛛抓取的份额，对网站收录极为不利。

关于sitemap是否需要每天都提交的问题，本文就简要的说这么多。总之来说，网站地图的作用毋容置疑，搜索引擎也会优先去抓取sitemap里面的链接，但是不会每天都来抓取。即便我们提交了sitemap，也要耐心等待。

所以，提交跟不提交，没有根本的区别。当然，如果网站更新的量很大，并且新增内容都生成了单独的sitemap文件，那么每天提交就很有必要了。

事实上，如果网站内容的更新量达到这个程度，就可以考虑用程序来实现sitemap的生成和自动提交了。

文章页面在sitemap地图上是否可以增加权重？听说网站地图能够增加搜索引擎蜘蛛的抓取，那如果把文章页面的URL链接也放在sitemap上是不是还能增加权重呢？

sitemap的直接作用是让搜索引擎蜘蛛方便抓取，几乎所有的搜索引擎都会优先抓取网站地图，所以把文章页面的链接放在网站地图里面，可以增加被抓取的机会，但时是否能提升权重就不好说了。

事实上，文章页面的权重由本身的内容质量，以及网站的整体权重，另外还有各种内链等共同来决定。理论上sitemap不能提升文章页面的权重。

笔者建议，想要提升文章页面的权重，进而提升关键词排名，最重要的还是做好文章的内容，当然站内优化的也是必须的。至于sitemap网站地图的作用，只考虑到蜘蛛抓取就可以了。

新站需要做网站地图吗？新站可以做网站地图，也建议大家去做下网站地图，因为搜索引擎在抓取新站的时候，通常不会一次性抓很多页面，而网站地图能够把站内的链接都提交给搜索引擎，同时搜索引擎也会优先抓取网站地图，所以做网站地图对于新站是有好处的。

做过新站seo的朋友都应该知道，新站的抓取频次很低，如果没有网站地图的话，就会有很多页面不会被抓取到，这会直接影响到页面收录。

大家应该有过这样的经验，比如新站目前有200个页面链接，如果我们做好网站地图并且提交的话，当天或者是第二天就能看到有100以上甚至200的抓取频次！这其实就是搜索引擎把网站地图里面的链接都抓取了。

反之，如果我们不做网站地图，这个抓取频次肯定会低很多！

当然，大家也要正确认识网站地图的作用，它只是让网站内页快速被搜索引擎发现和抓取，至于是否收录就得具体分析了。对于新站来说，放出收录的速度是很慢的，很多都是已经收录，但不会放出，需要等到过了一段时间的考察期才会放出。

那如果新站不做网站地图有什么坏的影响呢？这其实也不是绝对的，毕竟现在搜索引擎发现链接的方式有很多，我们主动提交链接的方式也不止网站地图。

之所以建议大家做网站地图，一来是网站地图的确有作用，二来制作网站地图也不复杂，像zblog等开源程序就有很多自动生成网站地图的插件！

网站地图什么时候提交好？网站建设好整体不用修改了。网站地图不是添加一次就不添加了吗？

网站地图的作用是很明显的，对于符合规范的网站地图，百度等搜索引擎会优先去爬行提取其中的URL链接，然后再去抓取。所以通常来说网站都会设置网站地图。

那么具体来说网站地图什么时候提交好呢？笔者认为在网站确定不会再做较大改动的时候就可以提交了。另外大家尽量把网站地图做成是自动的，也就是说网站后续更新的内容都会自动添加到网站地图上，这样的话我们就不用每次都去手动提交，搜索引擎会不定期的来提取新的链接。

当然除了使用网站地图外，还有很多其他的方式向搜索引擎提交链接，比如说手动提交、比如说安装百度自动提交代码等等，这些都是可以的。当然尽量把这些方式都用上，这是最保险的。

关于网站地图提交时间的问题，笔者就跟大家说这么多。总结来说，网站地图提交的时间没有严格的规定，只要大家觉得是时候提交了就去提交即可。

当然，我们不能把页面收录完全寄托在网站地图上，网站页面收录最终还是要看质量，如果页面内容质量不行，那么网站地图做的再好，提交得再即时，也不会有理想的效果。

目前来说，大部分网站都带有网站地图，当然这里的网站地图不仅仅指百度或者其他搜索引擎要求的特定格式的网站地图，有些仅仅是为了方便用户，把一些重要页面归档在某个页面提供给用户，这跟早期出现的网站目录颇为类似。

笔者今天讲的是指搜索引擎要求的特定格式的文件，这样的网站地图是什么意义，有什么作用？

在讲解网站地图有什么用之前，我们先来看看什么是网站地图。就seo优化而言，网站地图即站点地图，是按一定规则汇集了大量页面（包括页面url以及标题等）的文件，其目的是将页面url集中提交给搜索引擎，增加页面被蜘蛛抓取的次数，增加页面的收录。

网站地图一般为xml、txt、html三种文件格式，其中最常用的是xml格式，最常见的命名为sitemap，如sitemap.xml。

现在我们就来具体说说网站地图有什么用。前面已经提到过网站地图的目的是集中提交页面url，以最终达到增加收录的目的。那它的作用具体体现在哪些方面呢，我们来具体分析下：

1.提交新页面url

虽然新产生的页面在列表页或者首页会出现，也就是说搜索引擎蜘蛛可以通过列表页或者首页抓取到新页面，但网站地图作为蜘蛛最喜欢的页面之一，及时将新页面提交，这就加大了新页面被爬行抓取的可能性。

2.提交没有被抓取的页面

大家都知道，蜘蛛的抓取有一定的配额，在众多的页面url中，存在部分url并没有被蜘蛛抓取到。对于这些页面，我们就可以把他们集中到网站地图文件里，提交给搜索引擎。

3.提交重要页面

正常来说，在没有抓取之前，搜索引擎不会知道到底哪个页面是重要的（站长认为重要的重点优化页面），也就不会优先去抓取这些重要页面。那怎么办呢，其中一个办法就是通过网站地图提交。

总之，网站地图的作用还是很明显的，这也是每个网站都配置了类似sitemap文件的原因。对于网站地图，有几个需要注意的地方，注意这些细节才能让网站地图的作用得到最大发挥。

1.网站地图可以有多个文件，一般来说每个sitemap文件里包含50000条url记录即可，超出的话有可能不会被完全抓取到。所以，如果网站页面过多，可以考虑做成多个网站地图。

2.网站地图的名称不一定非得是sitemap，也可以是其他。

3.如果是在百度搜索资源平台提交网站地图（sitemap）文件，需要是txt或xml这两种格式。

4.不要频繁重复提交没有被收录的页面，提交几次没被收录，这更多的页面本身的问题，反复提交会损失蜘蛛抓取其他页面的机会，同时也体现出对搜索引擎的不友好。

笔者总结，网站地图有用但不是万能的，建议大家还是优先考虑内容建设。

另外，广义上的网站地图还包括了像列表页、tag聚合页等，应该说凡是汇集了较多网址的页面都可以看成是网站地图，只不过这些网站地图形式各异，大小不同。

为什么有的大型网站没有网站地图？网站地图虽然重要，但不是必须的！另外有些大型网站有很多细分的sitemap文件，以及很多细分的导航页面，外人可能不会直接看到常规的网站地图。

SEO做得好的大型网站，常规的网站地图起到的作用已经很小了，因为网站权重够高，更新的页面基本都是秒抓取，甚至秒收录。

所以，有无网站地图区别不是很明显。另外，除了网站地图以外还有很多其他类型的资源提交，比如说快速收录等等。

网站地图的基本作用是方便蜘蛛爬行和蜘蛛抓取，既然这两个指标都不成问题，那么是否设置网站地图就没有那么重要了。但对于权重低的小站来说，网站地图还是有必要设置的，但同时也要明白，不能指望网站地图给网站带来质变。

在这里提醒大家，看问题不能看表面，要做更深层次的数据分析。不能因为别人的网站没有做网站地图，我们也不做，这样的对比可能会导致我们走弯路。

网站地图中http和https是否可以共同存在？同个网站里面不能同时存在http和https，所以在网站地图里面也不能同时存在http和https。网站URL是需要同一的，我们没有必要去弄两套页面地址，这样做是画蛇添足。

有朋友可能提到301重定向的问题，这跟网站地图没有什么联系，不管是把http的301到https，还是把https重定向到http，这些都不需要在网站地图里面体现。做301重定向只需要设置好规则就行，同时在百度搜索资源平台里面提交。

如果在网站地图里面同时存在http和https，那么搜索首先得去爬行和抓取这两种地址，然后再去判断哪个是准确的地址，这样就增加了搜索引擎的工作任务。在没有额外作用的情况下，给搜索引擎增加任务，这显然不会有好处。

建议大家，在自己不懂怎么设置https的情况下，像普通的企业网站和个人博客，是没有必要非得去做https的。在网站确定好http还是https以后，哪整个网站的链接地址都有统一，不管做没有301。

当然，网站地图里面也是一样的，切记为了“安全起见”，把http和https的链接地址都写进去，这是得不偿失的。

网站robots文件是否需要放网站地图？网站robots.txt这个文件里面是否放网站地图是没有影响的，通常我们在网站正式上线以后，都会去提交sitemap文件页面，这样搜索引擎就能知道网站地图的存在，后面也会不断的来抓取。所以没有必要在robots文件里添加，当然添加了也是可以的。

关于网站地图的问题，百度发了及时清理历史sitemap文件的公告，从这个公告中可以看出，目前搜索引擎对于网站页面的抓取不会太过依赖网站地图。相反，如果网站地图的文件过大，还会影响到搜索引擎对网站新内容页面的抓取。

所以大家不要纠结要不要在robots文件里添加网站地图链接了，因为网站地图的作用已经明显降低，对于数据并且自动更新网站地图的网站来说，这个sitemap文件已经有了鸡肋的意思。

大家之所以想要在robots文件里面添加网站地图，就是担心怕某些页面不会被搜索引擎抓取到。其实不用担心，百度搜索的自动抓取功能已经再次上线，只要网站页面被打开，就会自动推送到百度搜索。至于蜘蛛抓取后收录还是不收录页面，这就要另行讨论了。

另外，前段时间百度搜索似乎在对robots这个功能进行升级，经常出现异常情况。这也说明百度会陆续对robots和网站地图等这些基本功能进行调整，所以我们不能继续墨守成规，过去使用的某些SEO技巧，放在现在未必就实用。

关于网站robots文件是否需要放网站地图的问题，就简单的说这么多。总之来说，网站地图的功能已经没有那么好，大家不用在这个问题上浪费时间，做好内容建设和用户体验才是王道。

一些初入SEO行业的小白可能听过网站地图这个名词，但是对于网站地图的具体作用可能不是很清楚。今天特意查了一下这个关键词的百度指数，发现100多，就立马写了这篇文章，关于网站地图(sitemap)是什么?网站地图如何生成?这些问题在这篇文章里都为大家解决。

网站地图(sitemap)是什么?

顾名思义，网站地图是为网站的用户提供导航索引的一种用于网站的地图，这里说的用户一方面指现实中的用户，另一方面指搜索引擎蜘蛛。

网站地图的格式：

网站地图主要分为3种格式，一种是html格式的，一种是xml格式的，还有一种是txt格式的，html格式的网站地图主要应用于网站的页面上，xml和txt格式的网站地图主要是给蜘蛛看的，一般需要提交给搜索引擎。

网站地图文件里长什么样

1、html网站地图

这种地图其实就是通过html代码写出来的一个网站页面，至于具体长什么样，需要设计人员去规划。

2、xml网站地图

xml格式网站地图文件后缀是xml，

里面具体样式是：

若有多条url，按照上述格式重复之间的片断，列明所有url地址，打包到一个xml文件，向搜索资源平台进行提交。至于具体每一项里面填什么，第三方工具里面都会有提示。

3、txt网站地图

只要将网站所有url一行一条的放到txt文档里，则txt格式的网站地图就制作完成了。

为什么要做网站地图?

了解了网站地图是什么，麒麟老师觉得有必要为大家介绍一下为什么要做网站地图，下面主要分为两个方面来进行讲解。

1、提升用户体验

对于一些中大型网站，网站的目录、频道页面很多，用户一下找不到自己想要的页面，此时如果网站做了网站地图，用户通过网站地图可在短时间内找到自己想要的页面，当然网站地图要做的合理，这需要前期的细致规划。这种地图一般是html格式的。

2、提升蜘蛛的抓取效率、收录

html格式的网站除了上述作用外，还有一个作用，那就是提升蜘蛛的抓取效率，从而促进网站收录，当然，xml以及txt格式的网站地图也有此作用。网站地图将网站所有的有效页面都放在了一起，可以让蜘蛛短时间内发现网站所有的链接，从而爬取收录。

网站地图如何生成?

1、通过工具生成

对于一些小型的企业网站，通过一些工具生成网站地图即可，这里麒麟老师推荐爱站工具包里的网站地图生成工具。当然大家也可以在百度搜索网站地图生成工具，来找到合适自己的那一款。

2、通过技术生成

对于一些中大型网站，通过工具生成可能就不行了，一方面数据量大，耗时长，另一方面平台可能会收费。此时就需要公司的技术人员来通过技术手段进行生成网站地图。

网站地图怎么用?

1、html格式网站地图

对于html格式的网站地图，一般放到网站的底部模版，用户随时可以看到，同时蜘蛛也可以随处抓的到。除了网站的底部外，还会放到robots.txt这个文件中。

2、xml及txt格式网站地图

对于xml及txt格式的网站地图，一方面需要放到robots.txt文件中，另一方面需要通过百度搜索资源平台提交给搜索引擎。