robots.txt怎么写,我想禁止访问一个文件夹,不是在根目录

2025年01月07日 08:32
有1个网友回答
网友(1):

要是不起作用这个要禁止得怎么写? ...生动的叫做“蜘蛛” 蜘蛛在爬去网站页面之前,会先去访问网站根目录下面的一个文件,就是robots.txt。这个文件...