当前位置 : 金戈铁马SEO培训网 / 网站优化

被robots屏蔽的网页如果获取了外链会获取权重吗

金戈铁马SEO培训网   http://www.Gengtima.com/   May-26 8:53:44
代人提问:

网站下面有这么一个目录 /test
目录下有一个页面 /test/1.html
robots里禁掉了蜘蛛访问/test目录的权限
在另外一个网站放上/test/1.html这个页面的超链接并且被蜘蛛抓取了
那么这个链接会不会获取权重,或者传递权重给网站主页?

这个url即便在其他地方被发现,但由于robots的缘故,它也不会被建索引。

至于权重的问题,用最简单的逻辑做判断即可。

 

问lee大佬,为何淘宝依然健在?

robots掉的网页,如果互联网上其他网页链接并描述了这个网页的内容,我们会把这些描述信息建入索引,但robots掉网页我们不会抓取,网页内容也不会收录。

关于robots的帮助中有介绍:

http://www.baidu.com/search/robots.html
我在robots.txt中设置了禁止百度收录我网站的内容,为何还出现在百度搜索结果中?
如果其他网站链接了您robots.txt文件中设置的禁止收录的网页,那么这些网页仍然可能会出现在百度的搜索结果中,但您的网页上的内容不会被抓取、建入索引和显示,百度搜索结果中展示的仅是其他网站对您相关网页的描述。

本文来自金戈铁马SEO培训网(www.Gengtima.com),转摘请注明出处。

体验版下载

学员心得分享