网站收录很多asp页面（本身是html的文件），如何用robots屏蔽掉
2019-04-21 13:00:10 浏览量：97
如何写出这个代码：
Disallow: **.asp
空间和域名都检查过，没问题
4人参与回答
-
Disallow: /asp?71 2019-04-21 13:00:12
-
陈宇 网站运营 SEO经验4年Disallow: /? 一般收录的话，最好是收录asp页面， 你直接设置成为静止访问所有包含?的网页就可以了！78 2019-04-21 13:00:12
-
袭明 搜外社区运营主管看了网站，现在这些动态URL都已是死链接，而且网站是做了URL伪静态的。 可以Robots把所有动态URL屏蔽一下即可。 先加上这几条，还可以根据网站日志里面蜘蛛抓取的动态URL和已经收录的动态URL及时添加： Disallow: /*.asp Disallow: /cnbig.asp?id= Disallow: /enproducts.asp?catid= Disallow: /products_l.asp? Disallow: /aboutus.asp Disallow: /aboutus2.asp Disallow: /aboutus3.asp Disallow: /aboutus4.asp Disallow: /aboutus5.asp Disallow: /aboutus6.asp85 2019-04-21 13:00:12
-
吴仕奇 武汉国信映盛互动技术 SEO专员 SEO经验2012年起这个并无大碍！31 2019-04-21 13:00:12
