华仔博客

  • 首页
  • seo
  • 网站建设
  • 工具资源
  • 生活
  • 程序开发
  • 网上那点事
  • 网络营销
华仔博客
一个经验分享的博客
  1. 首页
  2. seo
  3. 正文

Disallow: /test和Disallow: /test/的区别

2013年6月26日 1956点热度 0人点赞 0条评论

Disallow: /test和Disallow: /test/的区别

近期发现有些朋友还是不能了解他们之间的区别。今天seo就来为大家详细的介绍下

该项的值用于描述不希望被Robot访问到的一个URL,这个URL可以是一条完整的路径,也可以是部分的,任何以Disallow开头的URL均不会被Robot访问到;

注意“Disallow: /test和“Disallow: /test/”的区别,虽说只区别于一个反斜杠“/”,不过意义完全不同。“Disallow: /test”表示可以禁止的URL包括:/test、/testabc.html、/test/abc这三种形式;“Disallow: /test/”则允许Robot访问/test、/testabc.html,禁止访问/test/abc这种形式。

如果Disallow记录的值为空,即“Disallow:”格式,则说明该网站的所有内容可以被任何搜索引擎Robot抓取;在robots.txt文件,如果有声明User-agent,至少要有一条Disallow记录。

 

标签: 暂无
最后更新:2018年12月29日

admin

这个人很懒,什么都没留下

点赞
< 上一篇
下一篇 >

文章评论

取消回复
广告
搜索
最新 热点 随机
最新 热点 随机
WhatsApp收不到验证码、一小时死循环现在可付费接码 win7惠普m227fdw打印机扫描仪不能用解决办法 WordPress教程-WordPress撰写设置 GTranslate3.04翻译插件不工作的原因找到了 WordPress教程-WordPress常规设置 wordpress教程-WordPress 安装 WordPress教程-WordPress概述 wordpress 导入word文档插件Seraphinite Post .DOCX Source 谷歌SEO的页面标题和元描述的长度多长最合适? 如何利用wordpress编辑网站页面 Hitpaw watermark remover去图片视频水印神器 WordPress博客页面和文章 如何充分利用您的 SEMrush 帐户 什么是 Robots.txt 文件以及Robots.txt 文件如何工作 ? WordPress列表页分页制作教程 youtube视频响应式插件Simple YouTube Responsive WordPress文章页添加展开/收缩功能 WordPress栏目调用去掉Ul标签 WordPress如何调用置顶文章 如何使用奈飞Netflix cookies登录奈飞Netflix GSA Search Engine Ranker项目屏幕 GSA Search Engine Ranker内容创建服务推荐 GSA Search Engine Ranker 仿写服务推荐 GSA Search Engine Ranker电子邮件账户推荐 GSA Search Engine Ranker搜索引擎提交服务推荐 GSA Search Engine Ranker索引服务推荐 GSA Search Engine Ranker验证码服务推荐 GSA Search Engine Ranker代理服务推荐 GSA Search Engine Ranker介绍 ChatGPT for Wechat-在微信上使用ChatGPT
网络营销之微博营销实战分享 济南seo教程:怎样让网站的百度排名再度提升 seo工具_史上最好用的网站地图生成工具 什么是 Robots.txt 文件以及Robots.txt 文件如何工作 ? Disallow: /test和Disallow: /test/的区别 为什么要研究页面价值 如果当年你要是这么跟我说了我可能就考上哈佛大学了。 你真的会换链接吗 seo博客_网站内部链接应该这么建设 Hitpaw watermark remover去图片视频水印神器 百度联盟优质会员的福利来了sitemap开放了呼呼 Google搜索新算法,严惩侵权的网站 seo博客_什么是404页面及怎么制作404页面 号外号外谷歌字体国内已经正常打开 网站更换主题喽 个人微信号怎么实现公众号自动回复功能 北京seo介绍下对于网店里的图片优化技巧 seo博客_本地dedecms安装方法 章丘撤市设区最新进展 seo博客_seo寻找资源的方法终极解密 ios开发_UIView的常见属性 做百度知道不被删除的实战技巧 男孩实现11年前的爱情约定,女主播现在如何了结 百度站长平台高端SEO俱乐部第一期沙龙活动整理分享 siteapp实用后的一些感想 centos7知识大全 360和百度大战之百度开始反击 H7N9来了,元芳,你怎么看? WordPress列表页分页制作教程 ecshop 首页调用文章图片 成功版

© 2012-2025 sem-home.com.版权所有.

主题KRATOS貌似作者网站打不开了,就没加,嗯就这样

京ICP备12020022号