二级目录禁止蜘蛛的 robots.txt 文件怎么写?
你就在官方默认的robots.txt文件里面写,直接在Disallow: 后面写上你要禁止的路径,应该是没问题的~~
标签:robots,txt,蜘蛛
版权声明:文章由 酷百书 整理收集,来源于互联网或者用户投稿,如有侵权,请联系我们,我们会立即处理。如转载请保留本文链接:https://www.kubaishu.com/life/130109.html
二级目录禁止蜘蛛的 robots.txt 文件怎么写?
你就在官方默认的robots.txt文件里面写,直接在Disallow: 后面写上你要禁止的路径,应该是没问题的~~
标签:robots,txt,蜘蛛