<meta name="robots" content="INDEX,FOLLOW">的含义 seo
来源:互联网 发布:软件设计师培训学校 编辑:程序博客网 时间:2024/04/29 09:33
robots.txt是放在网站中,文件级的网络蜘蛛授权;
而robots Meta标签是放在网页中,一般用于部分网页需要单独设置的情况下。
两者的功能是一样的。
Meta robots标签必须放在<head>和</head>之间,格式:
<meta name="robots" content="index,follow" />
content中的值决定允许抓取的类型,必须同时包含两个值:是否允许索引(index)和是否跟踪链接(follow,也可以理解为是否允许沿着网页中的超级链接继续抓取)。共有4个参数可选,组成4个组合:
- index,follow:允许抓取本页,允许跟踪链接。
- index,nofollow:允许抓取本页,但禁止跟踪链接。
- noindex,follow:禁止抓取本页,但允许跟踪链接。
- noindex,nofllow:禁止抓取本页,同时禁止跟踪本页中的链接。
以上1和4还有另一种写法:
index,follow可以写成all,如:
<meta name="robots" content="all" />
noindex,nofollow可以写成none,如:
<meta name="robots" content="none" />
需要注意的是,robots Meta标签很多搜索引擎是不支持的,只有少数搜索引擎能够识别并按给定的值抓取。所以,尽可能的使用robots.txt文件来限制抓取。
最后,给大家一个建议,不要太刻意的在robots.txt中设置过多禁止文件或目录,只设置确实不希望被搜索引擎索引的目录和文件就可以了。
特别是在不清楚文件或目录的作用时,不要轻易禁止抓取。前阵一位做旅游的朋友,网站中有大量的旅游景点图片,几大搜索引擎中却都没有索引,后来对网站检查时发现图片目录upload在管理目录admin下,被robots.txt禁止抓取了。
0 0
- <meta name="robots" content="INDEX,FOLLOW">的含义 seo
- SEO优化meta标签 name="robots" content="index,follow,noodp,noydir"解释
- HTML 中标签 <meta name="robots" content=""> 的含义
- 【 转载】HTML 中标签 <meta name="robots" content=""> 的含义
- meta name的含义:<META http-equiv=Content-Type content="text/html; charset=gb2312">
- 【<meta name="" content=">】的作用
- 【<meta name="" content=">】的作用
- 【<meta name="" content=">】的作用
- 【<meta name="" content=">】的作用
- <meta name="" content="">的作用
- <meta name="ROBOTS" content="NOODP">
- <meta name="" content=">
- meta 中name="viewport" 的含义
- <meta name="name" content="string">
- <meta name="name" content="string">
- 网页头部<meta name="Robots" 用法 <meta系列用法.
- 网页头部<meta name="Robots" 用法 <meta>系列用法
- <meta name="viewport" content="width=device-width,initial-scale=1.0">是含义
- oracle 11g刷空表语句--11g默认不导出空表
- 相机照片删除了怎么恢复,相机删除的照片如何恢复
- asp一句话
- Windows如何打包Qt程序
- Qt编码问题
- <meta name="robots" content="INDEX,FOLLOW">的含义 seo
- oracle导出导入
- ArcGIS Engine开发入门教程
- c语言经典问题:汉诺塔 Hanoi问题
- Action层, Service层 ,modle层 和 Dao层的功能区分
- 从1.5k到18k, 一个程序员的5年成长之路
- OJ 1.H
- 函数指针
- sprite是可以在在上级容器之间中移动--来自make thing move 一书