华仔博客

  • 首页
  • seo
  • 网站建设
  • 工具资源
  • 生活
  • 程序开发
  • 网上那点事
  • 网络营销
华仔博客
一个经验分享的博客
  1. 首页
  2. seo
  3. 正文

Disallow: /test和Disallow: /test/的区别

2013年6月26日 1921点热度 0人点赞 0条评论

Disallow: /test和Disallow: /test/的区别

近期发现有些朋友还是不能了解他们之间的区别。今天seo就来为大家详细的介绍下

该项的值用于描述不希望被Robot访问到的一个URL,这个URL可以是一条完整的路径,也可以是部分的,任何以Disallow开头的URL均不会被Robot访问到;

注意“Disallow: /test和“Disallow: /test/”的区别,虽说只区别于一个反斜杠“/”,不过意义完全不同。“Disallow: /test”表示可以禁止的URL包括:/test、/testabc.html、/test/abc这三种形式;“Disallow: /test/”则允许Robot访问/test、/testabc.html,禁止访问/test/abc这种形式。

如果Disallow记录的值为空,即“Disallow:”格式,则说明该网站的所有内容可以被任何搜索引擎Robot抓取;在robots.txt文件,如果有声明User-agent,至少要有一条Disallow记录。

 

标签: 暂无
最后更新:2018年12月29日

admin

这个人很懒,什么都没留下

点赞
< 上一篇
下一篇 >

文章评论

取消回复
广告
搜索
最新 热点 随机
最新 热点 随机
WhatsApp收不到验证码、一小时死循环现在可付费接码 win7惠普m227fdw打印机扫描仪不能用解决办法 WordPress教程-WordPress撰写设置 GTranslate3.04翻译插件不工作的原因找到了 WordPress教程-WordPress常规设置 wordpress教程-WordPress 安装 WordPress教程-WordPress概述 wordpress 导入word文档插件Seraphinite Post .DOCX Source 谷歌SEO的页面标题和元描述的长度多长最合适? 如何利用wordpress编辑网站页面 Hitpaw watermark remover去图片视频水印神器 WordPress博客页面和文章 如何充分利用您的 SEMrush 帐户 什么是 Robots.txt 文件以及Robots.txt 文件如何工作 ? WordPress列表页分页制作教程 youtube视频响应式插件Simple YouTube Responsive WordPress文章页添加展开/收缩功能 WordPress栏目调用去掉Ul标签 WordPress如何调用置顶文章 如何使用奈飞Netflix cookies登录奈飞Netflix GSA Search Engine Ranker项目屏幕 GSA Search Engine Ranker内容创建服务推荐 GSA Search Engine Ranker 仿写服务推荐 GSA Search Engine Ranker电子邮件账户推荐 GSA Search Engine Ranker搜索引擎提交服务推荐 GSA Search Engine Ranker索引服务推荐 GSA Search Engine Ranker验证码服务推荐 GSA Search Engine Ranker代理服务推荐 GSA Search Engine Ranker介绍 ChatGPT for Wechat-在微信上使用ChatGPT
百度搜索上线ICP备案信息展示 seo详解下如何制定SEO网站优化的计划 《微信引流与变现》-微信营销神器 如果你喜欢上了一个seo小伙,你就找对人了 史上最昂贵域名 Top 10 discuz rss全文输出教程 弱弱的说说近期各大网站改版 如何使用奈飞Netflix cookies登录奈飞Netflix iPhone5来了你会买吗 如何将你裂变与转换的效率提升10倍 北京seo_网站内部优化实战篇 seo博客_如何判断一个论坛适合不适合发外链 A5交易启用www.admin5.net 独立域名 个人网站怎么通过网站赚钱 seo工具_升级版外链查询工具21号放出 ios开发_什么是UIImageView wordpress教程-WordPress 安装 dedecms仿淘宝产品显示效果 软文营销的关键环节有哪些? seo博客_seo寻找资源的方法终极解密 这就是生活_备案那点事 QQ自动加好友,自动加群,QQ营销软件 ios6.1正式发布,ios6.1完美越狱工具可能在周末发布 ecshop首页通过关键词调用产品 config_global.php未找到或者无法访问解决方法 北京seo详细介绍如何获取sitemap激活码 360搜索独立域名今天正式上线了 男孩实现11年前的爱情约定,女主播现在如何了结 dedecms信息发布员查看自定义表单内容 seo博客_robots.txt真的不管用,亲请看图

© 2012-2025 sem-home.com.版权所有.

主题KRATOS貌似作者网站打不开了,就没加,嗯就这样

京ICP备12020022号