robots.txt与nofollow之间的区别
 |
 |
 |
 |
| 【性价之王】 | 【线路之王】 | 【价格之王】 | 【配置之王】 |
| 【免费之王】 | 【香港首推】 | 【梯子之王】 | 【独服之王】 |
很多刚刚学习SEO优化的小伙伴，robots.txt与nofollow这两个术语在某些情况下使用时很难很清楚。
内容 1 一. 基本概念 2 二. 实际应用有什么区别？ 2.1 相关文章一. 基本概念
1. 什么是robots.txt？
robots.txt是一个文档，存放在网站根目录。当搜索引擎蜘蛛抓取网站时，首先会检查网站上是否存在robots.txt。
如果存在，搜索引擎一般都会遵循网站上的robots.txt中的规则来抓取网站内容；如果不存在，搜索引擎蜘蛛就可以访问站点上所有的内容。并不是所有的搜索引擎蜘蛛都会遵循robots.txt，但总体说来大部分搜索引擎蜘蛛都会按照robots.txt规则来抓取网站内容。
2. 什么是nofollow?
我们可以把整个互联网中想象成为一个大型城市的地铁系统，每一站就像是一个独立的站点。搜索引擎蜘蛛想通过某种方式来爬行整个城市的所有站点，而站点与站点之间最合理的方式就是通过相互链接，最后形成一个巨大复杂的蜘蛛网，搜索引擎蜘蛛找到某一链接后会一直爬下去，不断发现新的内容。在这一过程中就会存在有的站点被链接的次数多，有的站点被链接的次数少，那是不是被链接多的站点，排名就越高呢？仅仅只是考虑链接的数量就决定站点排名的高低？
曾经有人钻过空子，通过大量的垃圾外链，比如在其他网站上发布大量不相关的内容指向自己网站来提高网站排名，这似乎不太合理。于是搜索引擎改进了算法，甚至还推出了”nofollow“来规范整个链接市场。
nofollow是HTML页面中a标签的属性值，常见用法如下：
<a h="URL链接" rel="nofollow"></a>一旦a标签加上rel="nofollow"后，就是在告诉搜索引擎不要追踪此”URL链接“，这个链接是不值得信任的，不要将页面的权重分给这个”URL链接“。
二. 实际应用有什么区别？
1. nofollow同robots.txt一样都能禁止搜索引擎的抓取？
答案是否定的。很多人认为链接被加上nofollow后就不会被搜索引擎抓取了，比如:
<a h="https://www.baidu.com" rel="nofollow">百度</a>假设搜索引擎此时抓取到了WordPress百宝箱的这篇文章，在WordPress百宝箱的文章中有一个“百度”的链接，原本搜索引擎是有可能会继续爬行“百度”页面，但是它看到了“百度”加上了一个“nofollow”，这暗示着搜索引擎不能再继续抓取“百度”页面，也不能给“百度”页面传递权重。此路不通，但并不意味着搜索引擎从此就不能再抓取“百度”页面。搜索引擎还是可以通过其他途径来抓取“百度”页面的。
同理，比如某一站点使用了robots.txt来禁止搜索引擎的抓取，但在其他网站上有链接指向了这个禁止搜索引擎抓取的站点，搜索引擎仍有可能会找到该站点并将其编入索引，出现在搜索结果中。
2. nofollow与robots.txt屏蔽方式相同？
答案是否定的。nofollow针对的是单个的访问路径，是链接，挡住搜索引擎继续向前爬行的去路；而robots.txt可以禁止搜索引擎抓取某个单链接、某栏目下的所有页面，甚至是整个网站。
另外，nofollow标签可以屏蔽站外的链接；但是robots.txt只能屏蔽站内链接，两者之间还是有很大的区别。
3. 加上nofollow，这个链接就真的没什么价值了吗？
答案仍然是否定的。上文一直在说链接被加上了nofollow，就意味着搜索引擎不会追踪此链接，也不会传递权重，那是不是意味着就没有价值了呢？比如说我们站长会经常在别人的网站上留言或跑到论坛上去回帖，我们的链接往往会被加上nofollow，难道你就不去交流互动了吗？至少增加了你网站曝光的机会，增加了用户访问你网站的入口，你网站不管在什么地方在什么时候每出现一次在用户的面前，他就有可能会来访你的网站，这不是直接增加你网站的流量吗？有效的自然流量就会推动你网站的排名。
robots.txt与nofollow傻傻分不清楚的SEO优化小伙伴，通过上文的讲解，你理清了吗？如果有任何疑问，欢迎在下方留言哦。
[nofollow]历史优惠活动内容
猜你可能想看的VPS
- 快快数据测评：香港CN2云服务器,2核/1G/5M带宽,低至24元/月 香港VPS[主机]
- 人们为啥不爱吃海底捞了?海底捞上半年亏损达2.97亿 网友神评扎心 全球[VPS测评]
- 关键路径、资金情况、政策关键数据中心的可持续发展路径在哪里？ 全球[VPS测评]
- 创意IT服务公司主页网站模板 - Softets 全球[VPS测评]
- 跨境贸易和跨境电商的三大区别简单分析 全球[VPS测评]
- 147SEO采集器 CSS选择器写法案例 全球[VPS测评]
- 实例 GIA0910629396 重启失败,原因:sudo: unabl 全球[VPS测评]
- 华为S2300 系列交换机如何修改密码？ 全球[VPS测评]
- UOVZ怎么样？香港30M大带宽VPS 直连线路月付50元 香港VPS[主机]
- 印象云vps,香港安畅gia低至22元起,1核1G内存,小带宽无限流量, 香港VPS[主机]
- 手帕云,便宜小带宽香港CN2 VPS,集群10G防御,双向CN2直连,仅 香港VPS[主机]
- locvps：香港cn2vps(葵湾机房),2核2G40g硬盘,8折优惠 WINDOWS
- 酷锐云双十一活动：美国vps、香港vps云主机,2核4G4M,50元/首 美国VPS[主机]
- 狸猫云：香港高速CN2VPS,200元/年-香港高速GIA云服务器促销活 香港VPS[主机]
- UCloud全球大促活动：香港2核4G2M仅485元/年(台湾437元/ 美国VPS[主机]
- 米上云：免备案香港云服务器,全场75折优惠码,香港高防vps月付23元起 香港VPS[主机]
- 热网互联：香港/日本云服务器2核4G低至104元/月_青岛/日本独立服务 独立服务器[U]
- 水墨云：特惠香港、日本、韩国、洛杉矶小内存vps;IPLC专线/海外CN 日本VPS[主机]
- m247服务器：香港/日本/新加坡/美国/欧洲等36个机房,1G~10G 日本VPS[主机]
- 腾讯云服务器价格表：云服务器低至95元/年;香港/新加坡轻量30Mbps 香港VPS[主机]
- 雷盾云：香港/美国/日本免备案云服务器,香港vps低至10元/月 日本VPS[主机]
- VoLLCloud：亚太地区香港200M/VPS月付低至3$,年付全场5 香港VPS[主机]
- 因搜包耽误员工下班，苹果将支付3050万美元赔款 全球[VPS测评]
- 适合美容院的正能量抖音文案，唯美阳光，正能量满满 全球[VPS测评]
- 快速云：云服务器和vps区别是什么云服务器和vps哪个比较安全2022- 全球[VPS测评]
- Vultr新用户100美金 最新活动来啦！新用户充值活动来了，充100美 全球[VPS测评]
- 厘米云,江苏移动100G高防云服务器,4核4G内存20M带宽79元/月 全球[VPS测评]
- 戈登云VPS,6折,充值送50%,香港cn2,美国cn云服务器,2核2G 美国VPS[主机]
- 众创逸云：国庆中秋节大促销优惠，不限流量香港CN2线路VPS 5.9元/ 香港VPS[主机]
- 岚云：香港安迅/沙田CN2直连,75折起,1核/1G/30G SSD/1 香港VPS[主机]
转载请注明原文地址: http://140.238.13.167:12355/read-222800.html