首页
好吧问答库
>
高分悬赏,最近百度蜘蛛经常抓取状态码500的页面(wordpress中的"你无权浏览草稿")应该怎么解决。
高分悬赏,最近百度蜘蛛经常抓取状态码500的页面(wordpress中的"你无权浏览草稿")应该怎么解决。
2024年11月19日 09:34
有1个网友回答
网友(1):
设置Robots.txt限制百度蜘蛛爬行改路径就可以了。
例:User-agent: *
Disallow: /admin/
Disallow: /images/
相关问答
最新问答
做纹理烫 要多做多久时间 ?
三星s6微信浮动回复失败怎么回事,短信可以
教师考编要求有哪些?
酸性玻璃胶和中性玻璃胶的区别?
英文简历apt⼀suite是什么意思
哈尔滨工业大学(威海)的通信工程和电子信息工程这两个专业好不好??
宇宙到底有没有边
无证驾驶出车祸怎么处罚
马桶冲水方式哪种好
经常觉得肚子不舒服,是什么原因??