网站上线初期设置robots禁止抓取是否对收录有影响？

一些站长在上线新网站之后，由于一些特殊原因设置了robots禁止抓取，之后取消设置后，对收录是否有什么影响呢？今天我们就来聊聊这个话题。

一、设置robots的意义

我们要回答这个问题，首先要了解为什么要设置robots的意义，我们一般设置robots是为了提高蜘蛛爬取效率，降低垃圾蜘蛛的骚扰，如果站点内容多，蜘蛛抓取数量提高之后，对服务器也是有一定影响，再加上网站初期由于内容没有完善，并不想让用户看到搜索结果，所以我们可以适当屏蔽蜘蛛抓取，一般我们会设置成这样：

User-agent: *Disallow: /

这个命令是屏蔽所有蜘蛛抓取，这样的话，所有蜘蛛不会爬取网站数据。

二、完善后对网站收录影响

如果我们网站内容完善后，我们可以尝试取消，允许部分或全部蜘蛛抓取，我们在更新robots.txt文件后，我们需要在百度资源平台后台进行更新robots文件，然后我们再用抓取诊断工具测试下，一般都没有什么问题，取消后也不会对收录产生影响，只是robots文件生效需要一定周期，我们耐心等待即可。