机器人的meta标记[翻译]
来源:互联网 发布:手机淘宝购物车在哪里 编辑:程序博客网 时间:2024/05/17 18:02
原文地址:http://javascriptkit.com/howto/robots2.shtml
如果你的网站供应商禁止你上传robots.txt文件到根目录,或者你仅仅是希望部分定制搜索爬虫对于你网站上的一些页面的动作,有一个可以代替robot.txt的方法,那就是使用robots的meta标签。
创建你的机器人meta标志
其实,机器人的meta标志和其他的meta标志没有什么两样,一定是添加在你的页的head部分的。
值 描述 (no)index是否允许爬虫索引该页面,允许的值: "noindex"或"index"(no)follow是否允许爬虫跟踪页面中的链接并且挖掘它们,允许的值"nofollow"或"follow."
如果你的网站供应商禁止你上传robots.txt文件到根目录,或者你仅仅是希望部分定制搜索爬虫对于你网站上的一些页面的动作,有一个可以代替robot.txt的方法,那就是使用robots的meta标签。
创建你的机器人meta标志
其实,机器人的meta标志和其他的meta标志没有什么两样,一定是添加在你的页的head部分的。
<meta name="robots" content="noindex,nofollow" />
这里有一个contents属性可以使用值的列表
这里有一些例子
1> 以下代码不允许对当前页索引,也不允许爬虫对超链接的页面进行跟踪
<meta name="robots" content="noindex,nofollow" />
2> 不允许页面索引,但允许爬虫对超链接的页面进行跟踪
<meta name="robots" content="noindex,follow" />
3> 允许页面索引,但不允许爬虫对超链接的页面进行跟踪
<meta name="robots" content="index,nofollow" />
4> 最后,有一个简单的方式来声明1>中的东西<meta name="robots" content="none">
- 机器人的meta标记[翻译]
- 机器人的meta标记[翻译]
- 机器人的meta标记[翻译]
- 机器人的meta标记
- html的meta标记大全
- meta标记
- meta标记
- meta标记
- meta标记项与排行榜的关系
- HTML标记语言META 标签的奥妙
- Umbraco的Meta标记设置方法
- 页面的头部标记2(META)
- 头部标记中meta关键词的用法
- HTML meta 标记
- html meta标记
- 常用meta标记
- META标记用法大全
- 常用meta标记小计
- 第二次翻译任务开始报名
- 解析Google新产品Google Cube发布
- XSLT学习笔记
- [推荐]学习XML / XPath / XSLT的好书
- XSLT元素参考[翻译]
- 机器人的meta标记[翻译]
- robots.txt 指南--介绍 [翻译]
- 先进制造技术专业名词解释
- [新鲜出炉]Enterprise Library for .net 2.0 2006年1月版
- 翻译团队第一次翻译任务[2006.1.18公告]
- 正式征集国外优秀原文
- 候选翻译文章列表[示范]
- eclispe
- 翻译团队招聘职务列表