华仔博客

  • 首页
  • seo
  • 网站建设
  • 工具资源
  • 生活
  • 程序开发
  • 网上那点事
  • 网络营销
华仔博客
一个经验分享的博客
  1. 首页
  2. seo
  3. 正文

Disallow: /test和Disallow: /test/的区别

2013年6月26日 1988点热度 0人点赞 0条评论

Disallow: /test和Disallow: /test/的区别

近期发现有些朋友还是不能了解他们之间的区别。今天seo就来为大家详细的介绍下

该项的值用于描述不希望被Robot访问到的一个URL,这个URL可以是一条完整的路径,也可以是部分的,任何以Disallow开头的URL均不会被Robot访问到;

注意“Disallow: /test和“Disallow: /test/”的区别,虽说只区别于一个反斜杠“/”,不过意义完全不同。“Disallow: /test”表示可以禁止的URL包括:/test、/testabc.html、/test/abc这三种形式;“Disallow: /test/”则允许Robot访问/test、/testabc.html,禁止访问/test/abc这种形式。

如果Disallow记录的值为空,即“Disallow:”格式,则说明该网站的所有内容可以被任何搜索引擎Robot抓取;在robots.txt文件,如果有声明User-agent,至少要有一条Disallow记录。

 

标签: 暂无
最后更新:2018年12月29日

admin

这个人很懒,什么都没留下

点赞
< 上一篇
下一篇 >

文章评论

取消回复
广告
搜索
最新 热点 随机
最新 热点 随机
WhatsApp收不到验证码、一小时死循环现在可付费接码 win7惠普m227fdw打印机扫描仪不能用解决办法 WordPress教程-WordPress撰写设置 GTranslate3.04翻译插件不工作的原因找到了 WordPress教程-WordPress常规设置 wordpress教程-WordPress 安装 WordPress教程-WordPress概述 wordpress 导入word文档插件Seraphinite Post .DOCX Source 谷歌SEO的页面标题和元描述的长度多长最合适? 如何利用wordpress编辑网站页面 Hitpaw watermark remover去图片视频水印神器 WordPress博客页面和文章 如何充分利用您的 SEMrush 帐户 什么是 Robots.txt 文件以及Robots.txt 文件如何工作 ? WordPress列表页分页制作教程 youtube视频响应式插件Simple YouTube Responsive WordPress文章页添加展开/收缩功能 WordPress栏目调用去掉Ul标签 WordPress如何调用置顶文章 如何使用奈飞Netflix cookies登录奈飞Netflix GSA Search Engine Ranker项目屏幕 GSA Search Engine Ranker内容创建服务推荐 GSA Search Engine Ranker 仿写服务推荐 GSA Search Engine Ranker电子邮件账户推荐 GSA Search Engine Ranker搜索引擎提交服务推荐 GSA Search Engine Ranker索引服务推荐 GSA Search Engine Ranker验证码服务推荐 GSA Search Engine Ranker代理服务推荐 GSA Search Engine Ranker介绍 ChatGPT for Wechat-在微信上使用ChatGPT
网站首页内容页内链多少个合适 【3GS 6.1.2和4.1】有锁版激活,完美越狱 史上最昂贵域名 Top 10 GSA Search Engine Ranker验证码服务推荐 dedecms当前栏目高亮以及主页高亮的方法 seo博客_做seo先从选择域名主机开始 dedecms 点击加载更多功能的实现 GSA Search Engine Ranker 项目窗口详细介绍 apache服务器默认首页的设置方面 医疗网络营销如何差异化 安徽的满分作文,大学上还是不上我也无语了 北京seo_lee详细介绍site语法下的结果数问题 企业微信营销必须牢记的5大要领 迈耶Google高层跳槽,担任雅虎新任CEO 北京seo开博第一篇 华仔教你如何看清一个网站和公众号 seo博客_如何做一个合格的网站编辑 (转载)如何正确使用微同步来更新微博 新手微商如何做论坛的推广与引流? seo博客_网站内部链接应该这么建设 Helo command rejected: ACCESS DENIED的 问题处理 对于近期站长点击百度竞价的问题之我见 如果当年你要是这么跟我说了我可能就考上哈佛大学了。 北京seo_网站内部优化不可全少的一部分-友情链接 北京seo_robots.txt和nofollow的用法 config_global.php未找到或者无法访问解决方法 百度搜索团队说说什么是页面价值 看SEO老鸟教你如何写原创 GSA Search Engine Ranker电子邮件账户推荐 网络口碑传播的特点

© 2012-2025 sem-home.com.版权所有.

主题KRATOS貌似作者网站打不开了,就没加,嗯就这样

京ICP备12020022号