域名预订与竞价策略：如何通过robots.txt优化SEO，确保好米不错过 全南广电公司网络营销推广

域名预约/竞价，不错过好东西

曾庆平SEO在上一篇文章谈到.txt概念时，留下了一个疑问：为什么曾庆平SEO的.txt写得这么复杂？

曾庆平SEO的.txt：***/.txt 这样做的目的是为了让网站对搜索引擎来说显得更加规范和权威。

1.使用.txt屏蔽相似页面或没有内容的页面。

我们知道，搜索引擎收录一个网页后，会对这个网页进行“审核”。当网页的相似度非常高时，搜索引擎就会删除两个网页之一。

如果以下两个链接内容相似，则应屏蔽第一个链接。 #

第一个有很多链接。屏蔽的时候就屏蔽/bbs/.php？并且所有这些都将被阻止。代码如：/bbs/.php？

像这样没有内容的页面也应该被屏蔽：这样的链接有很多。拦截时，只要拦截/index.php?sid=，就会全部被拦截。

代码如：/index.php?sid=

2.使用.txt来阻止冗余链接。当动静共存时，一般将动态的去掉。

通常有多个链接指向网站上的同一页面。当这种情况常见时，会让搜索引擎怀疑网站的权威性。通过.txt删除非主链接。

如果以下两个链接指向同一页面，请删除第二个不太重要的链接。

曾庆平SEO

代码如：/space.php?=

需要特别注意的是，首页通常有几个链接：/index.html等，此时不要屏蔽index.html。因为index.html、index.php等是默认首页，阻塞可能会导致蜘蛛爬行紊乱。

我们需要做的是，在制作主页的内部和外部链接时，使用不带index.html的链接。这就是URL规范化的概念。

3.使用.txt来阻止死链接。

死链接是指原本存在但后来因修改或更新而被删除的链接和网页。例如，原来在某个目录（假设该目录是//）的所有链接，现在都因为修改而变成了死链接，可以用.txt来屏蔽。

代码如： //

4. 使用.txt 阻止可能的“Ked”外部链接。

许多网站允许用户放置指向自己网站的链接，但过多的“k”外部链接可能会伤害自己。因此，很多将所有外部链接放到一个链接目录中，然后通过.txt统一屏蔽。

如果您还不是很清楚：的具体操作方法，可以在这里了解我之前的文章。