首页
行业词库
外链交易
软文助手
关键词挖掘
SEO学院
大数据分析
站长工具
HTTP状态查询
友链检测
死链检测
Sitemap生成
Whois查询
模拟百度抓取
首页
行业词库
外链交易
软文助手
大纲辅助构思
关键词文章
文章助手
结构化文章
关键词挖掘
SEO学院
最新资讯
SEO教程
论坛
大数据分析
站长工具
HTTP状态查询
友链检测
死链检测
Sitemap生成
Whois查询
模拟百度抓取
文章接口
查看全部
登录/注册
首页
>
SEO学院
>
论坛
>
网站收录很多asp页面(本身是html的文件),如何用robots屏蔽掉
网站收录很多asp页面(本身是html的文件),如何用robots屏蔽掉
2019-04-21 13:00:10
浏览量:78
如何写出这个代码: Disallow: **.asp 空间和域名都检查过,没问题
分享到:
4人参与回答
三土叔
Disallow: /asp?
71
2019-04-21 13:00:12
陈宇
网站运营 SEO经验4年
Disallow: /? 一般收录的话,最好是收录asp页面, 你直接设置成为静止访问所有包含?的网页就可以了!
78
2019-04-21 13:00:12
袭明
搜外社区运营主管
看了网站,现在这些动态URL都已是死链接,而且网站是做了URL伪静态的。 可以Robots把所有动态URL屏蔽一下即可。 先加上这几条,还可以根据网站日志里面蜘蛛抓取的动态URL和已经收录的动态URL及时添加: Disallow: /*.asp Disallow: /cnbig.asp?id= Disallow: /enproducts.asp?catid= Disallow: /products_l.asp? Disallow: /aboutus.asp Disallow: /aboutus2.asp Disallow: /aboutus3.asp Disallow: /aboutus4.asp Disallow: /aboutus5.asp Disallow: /aboutus6.asp
85
2019-04-21 13:00:12
吴仕奇
武汉国信映盛互动技术 SEO专员 SEO经验2012年起
这个并无大碍!
31
2019-04-21 13:00:12
最新问题
GA上网站本身成为引荐流量怎么解决?
链接来源网站不可访问怎么处理?
网络公司一般用什么样erp系统
发句牢骚,最近做了一个公司的新站,竟然不知道怎么开始做优化了、囧哇~
网络公司一般用什么样的客户管理系统
wordpres如何删除虚拟 robots
提交给百度sitemap.xml好还是rrs.xml好
新年百度给我的信心
删 帖
有一天你赖以生存的东西无法让你生存了,你会怎么办?
最热问题
wordpres如何删除虚拟 robots
关于蜘蛛抓取及反馈问题
各位seoer。上班到啥时候,都放假了吗?
如果做一个视频站会侵舍版权问题
为什么百度蜘蛛抓取我网页上没有的文件。
百度外链算法更新后,外链是否还有作用?
找不到网站日志... log文件夹里没有
修改网站编码会被惩罚吗?
医疗外推突破瓶颈的推广方式和方向有哪些?
将脱离官网的二级域名撤消掉,对官网有哪些影响?
提示信息
意
见
反
馈
联系电话:
1585150508*
QQ交谈:
小编
站长微信:
站长邮箱:
service@qingjiuzhubei.com