标签归档:robots用法

2017
02-20
robots用法非常重要,如果用错了,可能导致网站没有排名,不收录,种种恶果。所以使用robots一定要区分好,注意语法。 第一个:禁止所有搜索引擎访问网站的任何部分: User-agent: * Disallow: / 第二个: 允许所有的robot 访问 User-agent: * Disallow: 大家看到没有仅仅是一个下划线就代表了不同的含义, 同样User-.... Read More >