首页
行业词库
外链交易
软文助手
关键词挖掘
SEO学院
大数据分析
站长工具
HTTP状态查询
友链检测
死链检测
Sitemap生成
Whois查询
模拟百度抓取
首页
行业词库
外链交易
软文助手
大纲辅助构思
关键词文章
文章助手
结构化文章
关键词挖掘
SEO学院
最新资讯
SEO教程
论坛
大数据分析
站长工具
HTTP状态查询
友链检测
死链检测
Sitemap生成
Whois查询
模拟百度抓取
文章接口
查看全部
登录/注册
首页
>
SEO学院
>
论坛
>
Disallow: /admin和Disallow: /admin/区别
Disallow: /admin和Disallow: /admin/区别
2019-04-19 08:00:06
浏览量:132
Disallow: /admin和Disallow: /admin/区别 一直没闹懂,后面的斜杠加与不加的区别 图片目录 image js目录 js 要怎么写最好的robots
分享到:
6人参与回答
肖 俊
广州某网络公司SEO负责人 多年白帽黑帽SEO经验
Disallow: /admin的匹配度比Disallow: /admin/的匹配度更广泛,前者可以匹配到/admin/,/admin.html,/admin.htm等,而后者局限匹配admin这个目录。 也可以理解为 前者包含后者,后者包含于前者。 图片目录 imageJS目录 js 如果你的所有图片和js都是只分别在image和 js目录里,如需禁止则加一条Disallow: /image/和Disallow: /js/即可,如果不是,则去掉后面的反斜杠,或者把多个目录列出。 官方的解释如下: Disallow: 该项的值用于描述不希望被访问的一组URL,这个值可以是一条完整的路径,也可以是路径的非空前缀,以Disallow项的值开头的URL不会被 robot访问。例如"Disallow:/help"禁止robot访问/help.html、/helpabc.html、/help /index.html,而"Disallow:/help/"则允许robot访问/help.html、/helpabc.html,不能访问 /help/index.html。"Disallow:"说明允许robot访问该网站的所有url,在"/Robots.txt"文件中,至少要有一条Disallow记录。如果"/robots.txt"不存在或者为空文件,则对于所有的搜索引擎robot,该网站都是开放的。 Allow: 该项的值用于描述希望被访问的一组URL,与Disallow项相似,这个值可以是一条完整的路径,也可以是路径的前缀,以Allow项的值开头 的URL 是允许robot访问的。例如"Allow:/hibaidu"允许robot访问/hibaidu.htm、/hibaiducom.html、 /hibaidu/com.html。一个网站的所有URL默认是Allow的,所以Allow通常与Disallow搭配使用,实现允许访问一部分网页同时禁止访问其它所有URL的功能。
24
2019-04-19 08:00:08
王建中
刻缘营销创始人
一个包含目录 一个只是针对目录
73
2019-04-19 08:00:08
董伟
90后;网络爱好;新媒体探索;微信:ah_techan
我的认识是 Disallow: /admin 禁止抓取admin这个文件夹 Disallow: /admin/ 是禁止抓取admin文件夹下的所有文件目录
75
2019-04-19 08:00:08
尹惊涛
三年SEO经理经历,目前任职于国内某著名酒类B2C商城
就补充 董子桥 Disallow: /admin 解释:禁止抓取任何以/admin开头的目录和页面,比如Disallow: /admin2/目录 还包括 /admin123.html 这样的页面 其他的一样
74
2019-04-19 08:00:08
谢金标
广州乐声隔音材料 SEO工程师 SEO经验2011年起
Disallow: /admin 表示不能访问目录/admin/下的所有文件,包括该目录下的子目录和文件 Disallow: /admin/ 表示不能访问目录/admin/下的所有子目录及子目录下的所有文件,但是可以访问该目录下的文件,不包括子目录下的文件 假如二级目录/admin/下有子目录/admin/dede/,以及一个文件/admin/meili.html。 则: Disallow: /admin 表示不能访问/admin/dede/目录以及该目录下的文件,和文件/admin/meili.html Disallow: /admin/ 表示不能访问/admin/dede/目录以及该目录下的文件,但是可以访问/admin/meili.html PS:楼上的说法有误: 以下内容来自百度官方“百度搜索帮助中心-禁止搜索引擎收录的方法” 地址:www点baidu点com/search/Robots.html Disallow: 该项的值用于描述不希望被访问的一组URL,这个值可以是一条完整的路径,也可以是路径的非空前缀,以Disallow项的值开头的URL不会被 robot访问。例如"Disallow:/help"禁止robot访问/help.html、/helpabc.html、/help /index.html,而"Disallow:/help/"则允许robot访问/help.html、/helpabc.html,不能访问 /help/index.html。"Disallow:"说明允许robot访问该网站的所有url,在"/robots.txt"文件中,至少要有一 条Disallow记录。如果"/robots.txt"不存在或者为空文件,则对于所有的搜索引擎robot,该网站都是开放的。
94
2019-04-19 08:00:08
三木
八年网络营销经验,微信公众号:三木谈
Disallow: /admin 解释:禁止抓取任何以/admin开头的目录和页面,比如Disallow: /admin2/目录 Disallow: /admin/ 解释:仅禁止抓取任何以/admin/开头的目录和页面,但并不禁止抓取/admin2/目录 如果你用过火车头采集器或许会明白点。
9
2019-04-19 08:00:08
最新问题
GA上网站本身成为引荐流量怎么解决?
链接来源网站不可访问怎么处理?
网络公司一般用什么样erp系统
发句牢骚,最近做了一个公司的新站,竟然不知道怎么开始做优化了、囧哇~
网络公司一般用什么样的客户管理系统
wordpres如何删除虚拟 robots
提交给百度sitemap.xml好还是rrs.xml好
新年百度给我的信心
删 帖
有一天你赖以生存的东西无法让你生存了,你会怎么办?
最热问题
关于蜘蛛抓取及反馈问题
wordpres如何删除虚拟 robots
如果做一个视频站会侵舍版权问题
各位seoer。上班到啥时候,都放假了吗?
为什么百度蜘蛛抓取我网页上没有的文件。
找不到网站日志... log文件夹里没有
医疗外推突破瓶颈的推广方式和方向有哪些?
百度外链算法更新后,外链是否还有作用?
修改网站编码会被惩罚吗?
做推广快一年了,有没有在年前提加工资的事情?
提示信息
意
见
反
馈
联系电话:
1585150508*
QQ交谈:
小编
站长微信:
站长邮箱:
service@qingjiuzhubei.com