什么是INDEX, NOINDEX, FOLLOW和 NOFOLLOW及优化和特点
The Robots META tag放于后台HTML源代码的标头区(HEAD区)中。
我举一个例子:
Robot Meta Tag选项:
在一个Robots Meta Tag 中可使用的指令有四个:INDEX, NOINDEX, FOLLOW和 NOFOLLOW,以“,”分隔。其中:
INDEX指令:表示Robot可以索引本页;
FOLLOW指令:表示Robot可以跟踪本页链接;
NOINDEX指令:表示拒绝Robot索引本页,但可跟踪该页上的链接;
NOFOLLOW指令:表示拒绝Robot跟踪本页链接,但可索引本页。
实例:
在一些关于Robots Meta tag的文章中提到说,预定义的缺省设置是INDEX和FOLLOW。然而对Inktomi来说却并非如此。Inktomi的缺省项是INDEX和NOFOLLOW。
另外还有两个全局指令:ALL和NONE.
ALL=INDEX,FOLLOW:表示可以索引本页,且可跟踪该页链接;
NONE=NOINDEX,NOFOLLOW:表示不允许索引本页,
DeepSeek多模态怎么样及保姆级配置教程(codex、claude)实用指南
WSL2+Docker+Ollama本地部署大模型思路和实践指南(Qwen1.8b)实用指南
DeepSeek Harness热门插件盘点:10个实用插件,覆盖多Agent、上下文和多模态实用指南
grep文本搜索与正则表达式完整代码示例实用指南
AI漫剧伪装直男1‑24集无雾版夸克网盘资源免费分享
AI漫剧玉僧入尘1-68集无雾无删版夸克网盘资源免费分享