WEB1038 - <meta name="robots"> 标记包含无效的值
<meta name="robots">
标记包括 nofollow 或 noindex 属性值中的其中一个或全部两者。
说明
在 <meta name="robots">
标记中不正确地使用 nofollow 或 noindex 属性值可能会显著改变您的网站的搜索引擎结果。
<meta name="robots">
标记的其他有效属性值包括以下值:
follow 跟踪链接并分析目标网页。这是默认行为,并且可忽略。
index 将网页编入索引。这是默认行为,并且可忽略。
noodp 不使用 Open Directory Project 来创建内容描述。
noydir 不使用 Yahoo Directory 来创建内容描述。
noarchive 不允许搜索引擎显示内容的缓存版本。
cache 允许搜索引擎显示内容的缓存版本。
nocache 不允许搜索引擎显示内容的缓存版本。
详细信息
搜索引擎使用 Robots.txt 文件来确定应对哪些网页进行爬网。请确保在 <meta name="robots">
标记中正确地使用 nofollow 和 noindex 属性。 nofollow 属性指示搜索引擎将当前网页的内容编入索引,但忽略该网页上超链接的目标。 noindex 属性指示搜索引擎忽略当前网页的内容,并继续将网站中的其他网页编入索引。