具体应用中，robots.txt和nofollow的实际效果有什么不同？

许多刚不久学习SEO提升的小伙伴们，robots.txt与nofollow在具体应用中一直搞不清。关键在于让我们先搞清两者的定义，再依据具体情况剖析两者的差别。关键在于让我们先看来一下下两者主要概念。【推荐知识】：超详细robots.txt使用方法大全

一、基本概念

1. 什么叫robots.txt？

robots.txt是一个文本文档，放置在网站网站根目录。当各大搜索引擎蛛蛛爬取网站时，关键在于会查验网站上是不是有robots.txt。假如有，各大搜索引擎通常都是遵照网站上的robots.txt中的标准来爬取网站內容；假如找不到，各大搜索引擎蛛蛛就能够浏览网站上全部的內容。并非是全部的各大搜索引擎蛛蛛都是遵照robots.txt，但整体而言绝大多数各大搜索引擎蛛蛛都是依照robots.txt标准来爬取网站內容。

2. 什么叫nofollow?

让我们能够把全部互联网中想像变成一个巨型大城市的地铁站体系，每站台就好像一个单独的网站。各大搜索引擎蛛蛛想通过某类方法来爬取全部大城市的全部网站，而网站与网站中间最合理的方法就是说通过互相链接，最终产生一个庞大错综复杂的蛛网，各大搜索引擎蛛蛛寻找某一链接之后始终爬下去，持续找到新的內容。在这里一全过程中就会有有的网站被链接的频次多，有的网站被链接的频次少，那是否被链接多的网站，排名越多高呢？只是考虑到链接的总数就影响站点排名的高低？以前许多人钻过空子，通过很多的垃圾外部链接，例如在别的网站上公布很多不有关的內容指向自身网站来提高网站排名，这好像不太合理。因此各大搜索引擎改善了搜索算法，乃至还发布了”nofollow“来标准全部链接市场。

二. 具体应用有什么不同？

1. nofollow同robots.txt同样都能阻止各大搜索引擎的爬取？

参考答案是否认的。许多人觉得链接被再加nofollow后就不被各大搜索引擎爬取了，我们拿百度做个栗子:

假定各大搜索引擎这时爬取来到我们的本文，在我们的文章内容中有个“百度”的链接，本来各大搜索引擎是有将会会再次爬取“百度”网页页面，可是它见到了“百度”再加了一个“nofollow”，这预示各大搜索引擎不可以再再次爬取“百度”网页页面，也不可以给“百度”网页页面传送权重值。此路不通，但并不意味着各大搜索引擎此后就不可以再爬取“百度”网页页面。各大搜索引擎還是能够通过别的方式来爬取“百度”网页页面的。

同样，例如某一网站应用了robots.txt来阻止各大搜索引擎的爬取，但在别的网站上带链接指向了这一阻止各大搜索引擎爬取的网站，各大搜索引擎仍有将会会寻找该网站并将其编入索引，出現在百度搜索中。

2. nofollow与robots.txt屏蔽掉方法相同？

参考答案是否认的。nofollow对于的是单独的浏览相对路径，是链接，遮挡各大搜索引擎再次往前爬取的去向；而robots.txt能够阻止各大搜索引擎爬取某一单链接、某频道下的全部网页页面，乃至是全部网站。

另一个，nofollow标识能够屏蔽掉外链的链接；可是robots.txt只有屏蔽掉同站链接，两者還是有挺大的差别。

3. 再加nofollow，这一链接就确实没有什么使用价值了没有？

参考答案依然是否认的。上文让我们始终在说链接被再加了nofollow，就代表各大搜索引擎不容易跟踪此链接，也不容易传送权重值，那是否代表就沒有使用价值了呢？例如让我们工作员会常常在他人的网站上留言板留言或跑到社区论坛上来回贴，让我们的链接因此会被再加nofollow，难道说你就不去沟通交流互动交流了没有？最少提升了你网站曝出的机会，提升了客户浏览你网站的通道，你网站无论在哪儿在何时每出現多次在客户的眼前，他总有将会会到访你的网站，这并不是立即提升你网站的流量吗？合理的自然流量就会促进你网站的排名。因此，一切必须依据具体情况来对待。

到这儿本文的robots文件和nofollow的差别就告一段落了，只必须记牢“robots能够当做对于各大搜索引擎的公示，nofollow则是告之各大搜索引擎必需跟踪此链接！” 假如还有不明的地方，热烈欢迎探讨！