华仔博客

  • 首页
  • seo
  • 网站建设
  • 工具资源
  • 生活
  • 程序开发
  • 网上那点事
  • 网络营销
华仔博客
一个经验分享的博客
  1. 首页
  2. seo
  3. 正文

Disallow: /test和Disallow: /test/的区别

2013年6月26日 1414点热度 0人点赞 0条评论

Disallow: /test和Disallow: /test/的区别

近期发现有些朋友还是不能了解他们之间的区别。今天seo就来为大家详细的介绍下

该项的值用于描述不希望被Robot访问到的一个URL,这个URL可以是一条完整的路径,也可以是部分的,任何以Disallow开头的URL均不会被Robot访问到;

注意“Disallow: /test和“Disallow: /test/”的区别,虽说只区别于一个反斜杠“/”,不过意义完全不同。“Disallow: /test”表示可以禁止的URL包括:/test、/testabc.html、/test/abc这三种形式;“Disallow: /test/”则允许Robot访问/test、/testabc.html,禁止访问/test/abc这种形式。

如果Disallow记录的值为空,即“Disallow:”格式,则说明该网站的所有内容可以被任何搜索引擎Robot抓取;在robots.txt文件,如果有声明User-agent,至少要有一条Disallow记录。

 

标签: 暂无
最后更新:2018年12月29日

admin

这个人很懒,什么都没留下

点赞
< 上一篇
下一篇 >

文章评论

取消回复
广告
搜索
最新 热点 随机
最新 热点 随机
谷歌SEO的页面标题和元描述的长度多长最合适? 如何利用wordpress编辑网站页面 Hitpaw watermark remover去图片视频水印神器 中国教育报发稿联系方式 WordPress博客页面和文章 如何充分利用您的 SEMrush 帐户 什么是 Robots.txt 文件以及Robots.txt 文件如何工作 ? WordPress列表页分页制作教程 youtube视频响应式插件Simple YouTube Responsive WordPress文章页添加展开/收缩功能 WordPress栏目调用去掉Ul标签 WordPress如何调用置顶文章 《长安三万里》云盘分享 《名侦探柯南:黑铁的鱼影》云盘分享 《变形金刚:超能勇士崛起》云盘分享 如何使用奈飞Netflix cookies登录奈飞Netflix 《蜘蛛侠:纵横宇宙》云盘分享 长空之王云盘分享 阿诺施瓦辛格第一部电视剧《面目全非FUBAR》云盘分享 闪电侠第九季云盘分享 速度与激情10云盘分享 永生战士2022 灌篮高手电影粤语版云盘分享 超级马力欧兄弟大电影云盘分享 银河护卫队3百度云盘阿里云盘 漫长的季节阿里云盘 GSA Search Engine Ranker项目屏幕 GSA Search Engine Ranker内容创建服务推荐 GSA Search Engine Ranker 仿写服务推荐 GSA Search Engine Ranker电子邮件账户推荐
谷歌SEO的页面标题和元描述的长度多长最合适?
网站建设_wdcp mysql5.5升级5.6成功版 ios开发IBAction和IBOutlet的介绍 网络营销之微博营销实战分享 太阳召唤第二季阿里云盘 Mountain Lion系统php环境的搭建 为给父母省10万择校费,13岁宁夏女孩自杀 漫长的季节阿里云盘 号外 号外搜外改版,后期将停掉bbs dedecms当前栏目高亮以及主页高亮的方法 Helo command rejected: ACCESS DENIED的 问题处理 SEMrush 团购账号-SEMrush 的优点 北京seo带你了解百度ping服务 ecshop 首页调用文章图片 成功版 北京seo_robots.txt和nofollow的用法 ios6的完美越狱终于快来了呼呼 谷歌首页变图灵机,今天你的谷歌首页的google亮了吗 config_global.php未找到或者无法访问解决方法 百度外链工具如何批量拒绝垃圾链接 百度搜索医疗行业网站新增加备案信息 ios开发_UIButton的状态 centos7 mysql5.7安装教程 完美解决osx下 eclipse 打不开的情况 近期关于site语法查询的问题百度官网回答 网站内容不能被充分收录的原因 WordPress如何调用置顶文章 WordPress列表页分页制作教程 华仔教你如何看清一个网站和公众号 对于今年的百度更新发哥有话说 wordpress 产品图片放大镜效果制作 曼达洛人第三季中字4k阿里网盘

© 2012-2023 sem-home.com.版权所有.

主题KRATOS貌似作者网站打不开了,就没加,嗯就这样

京ICP备12020022号