1.反斜杠的插入

仍是以Disallow:/a/b.html为例，在编写该语句的时候，如果忘记插手了反斜杠，则是对全部内容进行开放，这与编写语句的想法相悖，因为反斜杠的意义是根目录。

2.空格的呈现

空格的呈现就很好理解了，因为搜索引擎对这个特殊符号的呈现其实不识别，它的插手只会使语句失去应有的效用。

现在年夜家理解我为什么说有人知道robots.txt文件，可是少有人知道该怎么正确编写了robots.txt文件了吧。其实robots.txt文件中还会其他的细节以及注意问题，在以后的时间里我会继续和说一下robots.txt文件编写中涉及到的目录年夜小、user-agent的数量等问题。

本文出自手机壁纸网.sjbzz，欢迎转载，谢谢。