百度收录该网站的roboto.txt文件存在限制指令。系统无法提供该页面的内容描述。这个应该怎么解

2025-04-14 01:34:20
推荐回答(1个)
回答(1):

这个是网站方自己禁止了百度蜘蛛来抓取才会显示这个展示结果,百度抓不到网站里面的内容。
解除的方法很简单,在空间后台根目录,有个roboto.txt文件,把里面的 User-agent: *
Disallow: / 这段删掉就可以了,百度就会来抓取,过一段时间之后网站内容就会放出来