为什么要讨论这个问题?我的网站搜狗不正常,只有两页。这两个网页不是普通网页,而是没有内容的网页。我觉得肯定有问题。

我曾经在导出外部链接的时候加了nofollow标签,这是正确的做法。后来我设置了站内跳转,可以保存一些东西,避免了链接失败,修改了很多网页,只需要修改跳转代码中的URL即可。

这些跳转代码毫无意义,我也不希望搜索引擎收录。然后我在机器人协议里写了蜘蛛是禁止访问这个目录的。

百度遵循机器人协议,不抓取跳转内容,但搜狗无视机器人协议,仍然抓取跳转链接页面。因此,搜索引擎不会完全对目录进行爬网。我怀疑搜狗为此给我买了很多网页。

事实上,内部和外部链接都应该用nofollow标记,这意味着告诉搜索引擎不要跟踪这个网站。

如果网站导出过多的外部链接或内部链接,会影响网站的权重,即使权重转移到跳转代码,也是没有意义的。跳转代码中的文章描述,包含在内,不能带来流量。

很多细节,其实是需要我们注意的。

谷歌最近发布了一项政策,要求人们出口外链并添加nofollow标签。没有搜索引擎算法比Google更好。既然谷歌说了,我觉得还是要处理一下。

大概有八九百个网页,需要逐一修改,工作量不小。

如果指向内部页面的跳转链接被标记为nofollow,那么禁止蜘蛛协议的机器人也应该被取消,这不会影响蜘蛛的爬行路径。