搜网站，结果出来这个（由于此网站的 robots限制，系统无法提供该页面的具体描述）跪求，谢谢 那是因为该网站在Robots协议中注明了不允许搜索引擎抓取这是官方对Robots文件说明及应用。
网站服务器上没有 robots限制，但是搜索之后，网站下方的描述 应该是设置了禁止蜘蛛抓取，就是robots协议，robots协议的地址一般是：www.你的网站.com/robots.txt如果在robots协议中设置了禁止蜘蛛抓取，那么网页快照中就会显示这个提示。
搜网站，结果出来这个（由于此网站的 robots限制，系统无法提供该页面的具体描述）求指教 网站的robots限制，会导致搜索引擎抓取不到内容，然而有的时候抓取不到，却有快照。
