有时候我们建站前期忘记写robots.txt文件了，很多我们不想让搜索引擎收录的内容却被收录了，这个时候会发现好像过了很长时间我们不想让收录的页面还是处于被收录的状态，到底robots生效要多久呢？
百度lee曾在公开场合说过：不同的站点略有不同，但通常在几天内陆续生效。
其实我们可以假想下robots生效的过程：
1.蜘蛛发现robots文件修改并将信息传回
2.分析修改前后的robots文件
3.删除不允许被收录的索引数据
这个过程中肯能还会存在其他的一些步骤，然而由于每个网站蜘蛛爬的频率和网站的权重不同（网站的重要性）而导致蜘蛛发现robots更改的时间延时或者被处理的优先性不同，最终导致的结果就是robots的生效时间不同。
通过以上分析我们可以得出robots的生效时间并不是一定的，如果你的robots更改后很久都没有生效的话，可以去这里投诉：tousu.baidu.com
本文来自投稿，不代表重蔚自留地立场，如若转载，请注明出处https://www.cwhello.com/34735.html
如有侵犯您的合法权益请发邮件951076433@qq.com联系删除
【如何提交关键词到SEO,论文提交关键词】 在进行SEO优化时，关键词的选择和使用是非常重要的，合理的关键词设置不仅能够提高网站的排名，还能吸引更多的用户访问，如何将关键词提交到SEO呢？本文将为您详细介绍如何…
在当今是互联网时代网站则是比较热门的，现如今有着很多的企业都有着自己的网站，去推广去宣传自己企业与自己的产品等。当然了有了网站就是肯定要去做网站的推广以及优化的，如果一个网站不优化不推广就等于是白费…
去在网络营销的公司呆过，在里边的SEO事业部里做事，主要工作是做SEO外包。做过的达标的网站，也忘记得七七八八了，可是失败的却记忆犹新，因为你没达标，做一个失败的网站吸取到的教训，不少于10个成功的网站…
是不是有那么一句话，不会挖关键词的seoer不是一个好SEOer，网站想批量做长尾词，不会关键词挖掘可不行。本文就来跟大家探讨一下关键词挖掘的一些事。 什么是关键词挖掘 什么是关键词挖掘呢?顾名思义，关键词挖掘就…
利用SEO优化改进网络品牌收录的基本方法是：尽可能增加SEO优化所包含的页面数量；通过网站优化设计，提高网页在SEO优化搜索结果中的效果，并获得比竞争对手更有利的地位。这些方法本质上都是为了提高网站在SEO优化…
SEO是一种利用搜索引擎的搜索规则来提高目前网站在有关搜索引擎内的自然排名的方式。一名优秀的seo人员应该能够掌握搜索引擎的中文分词方法与技巧，对其有一定的了解。那么搜索引擎是如何进行中文分词的呢？ 所谓的…
企业为什么要做seo，有什么作用，SEO就是搜索引擎优化，利用搜索引擎的规则提高网站在有关搜索引擎内的自然排名，百度的搜索结果中分为两项：商业推广和自然搜索，是由完全独立的两个部门分别运营两套独立系统。 商…
如果您已经完成了产品技术支持工作，您会发现，当我们进行系统演示时，我们总是提前准备相关文档，如SEO工作等。每一个SEO工作人员都会期望自己手中有一个搜索引擎优化指南，根据自己的SEO优化文档，在日常工作过程…
在线咨询：
邮件：951076433@qq.com工作时间：周一至周五，9:30-18:30，节假日休息
