小8博客 - 默默学习IT的懒羊羊

设置背景图片

技术教程 如何巧妙写robots文件,既禁止指定目录抓取又不让别人看到你的禁止目录

如何巧妙写robots文件,既禁止指定目录抓取又不让别人看到你的禁止目录
robots文件,一个说难不难,说易嘛,真要用到特殊情况的时候也不容易,一个让SEO又爱又恨的东西。比较最近提交robots文件,既不想让蜘蛛抓取我的指定目录,又不想被别人通过robots文件看到我的目录。常见的robots文件无非也就随便allow,disallow一下,当然今天用的这个方法也是巧妙的disallow了一下。不多说,直接上栗子: ...