绝大多数网站管理员都知道,网站在搜索引擎中获得良好的排名非常重要.因此,许多网站管理员都尽力取悦搜索引擎.我想把搜索引擎蜘蛛视为皇帝.我希望得到蜘蛛欣赏.为了提高网站的排名,但实际上,即使蜘蛛服用得好,也无法获得良好的排名,为什么呢?因为蜘蛛没有人类的情感,即使你认为它是皇帝而且他对你没有任何怜悯,怎么办,所以在网站SEO优化方面,它不是更好的蜘蛛优化效果,而是知道如何选择!学习如何阻止一些蜘蛛!例如,除了限制ADMIN和DATA上的蜘蛛爬行外,还可以在其他目录中屏蔽蜘蛛.这也非常有益.以下是一些屏蔽蜘蛛的技巧!

 

    一:可以屏蔽照片和模板目录

 

    因为有这么多的网站管理员在互联网上寻找相同的图像并应用现成的模板,这些模板已经在互联网上无处不在,你也会让你的网站再次被蜘蛛爬行.当然,蜘蛛会非常厌恶,因此您的网站将被标记为模仿作弊.赢得搜索引擎的青睐更加困难,因此通常可以阻止IMAGES目录!

 

    第二:可以屏蔽缓存目录以防止重复索引

 

    蜘蛛非常贪心.只要你喂它们,它们就会收到一切,无论它是否真实.例如,网站缓存目录的内容将由蜘蛛索引.这必然会复制网站的内容.如果重复过多,那么百度的算法机制会认为你的网站是作弊的,甚至会增加你网站的权重,给网站带来很大的影响.通常每个构建程序的缓存目录都不同,有必要根据不同的构建程序阻塞相应的缓存目录!

 

    III:CSS目录和一些RSS页面需要屏蔽

 

    CSS目录对蜘蛛完全没用.爬行后,会影响搜索引擎算法的判断.因此,它可以被ROBOTS文件屏蔽.构建程序的许多其他RSS页面也是一种内容重复. Capture也会导致搜索引擎错误判断,这两个方面的内容需要被屏蔽!这种盾似乎对蜘蛛不尊重,但事实上,它是一种治疗疾病的药物!好话和坏耳朵!

 

    IV:如果有两个页面,则优先级是阻止动态页面

 

    通常,搜索引擎很容易包含网站的静态页面.通常蜘蛛捕获和包含是两个不同的事情.除静态页面外,大多数网站还具有动态页面,例如www.XXXX / 1. Html和www.xxxxxx / asp? Id = 1这两个指的是同一页面.如果它没有被屏蔽,它将不可避免地导致两个页面同时被蜘蛛抓住.但是,当搜索引擎算法判断时,由于找到两个相同的页面,您会认为您的网站被怀疑是作弊,因此加强对您网站的检查,从而影响网站的排名,所以正确的方法是优先阻止网站的动态页面!

 

    V:涵盖与网站安全和隐私相关的内容

 

    在本文开头,提到ADMIN和DATA目录实际上是与网站的安全性和隐私相关的内容.暴露于蜘蛛根本没有益处.它甚至可能有一个额外的攻击通道,因此它涉及相关的安全目录,例如数据库目录.所有网站日志目录和备份目录都需要屏蔽.此外,一些网站管理员在网站备份后下载.但是,下载后,他们不会注意删除备份文件.这很容易导致蜘蛛反复取物.它也很容易被黑客攻击,因此还需要使用ROBOTS文件来阻止类似的RAR和ZIP文件!至少可以增强网站的安全性!

 

    总之,如果你盲目对待蜘蛛作为皇帝,它往往是尾巴的屁股,通过适当的屏幕优化,来解决蜘蛛的工作压力,这是最大的吻,也是改善网站SEO优化水平之路!