在SEO事情中，SEO职员天天都在与内容和链接打交道，从现在来看，他们深知自力的原创内容，对于未来站点耐久生长的主要性，但这一切的最先，都有一个条件，那就是阻止发生“蜘蛛陷阱”。  

“蜘蛛陷阱”是什么？  

简朴明白：蜘蛛陷阱，是基于站内设计的一种手艺战略，用于知足程序的特定需求，但它对搜索引擎并不友好，最大的特点是当蜘蛛抓取某个特定URL的时刻，它便进入了无限循环，只有入口，没有出口。  

常见的“蜘蛛陷阱”有哪些：  

1、站内搜索  

这是一个常见且容易造成“蜘蛛陷阱”的地方，当你试图在站内搜索某些特定要害词的时刻，若是类似search.php?q=这样的URL地址被搜索引擎抓取与收录，那么很可能发生大量无意义的搜索效果页面。  

解决：你可以通过Robots.txt这个文件，屏障动态参数。  

2、电商产物  

若是你以往有过操作电商网站的履历，那么你会遇到产物SKU的多样性的问题，统一个主题内容，会凭证SKU的差异，发生多个URL，造成大量的内容重复页面，这也导致严重虚耗蜘蛛抓取频率。  

固然，另有一种特殊的“蜘蛛陷阱”与电商产物页面类似，就是动态的内容插入，这也往往导致蜘蛛陷入温柔的陷阱。  

解决：确保URL的规范性，你可以试图行使rel=canonical这个标签来解决类似问题。  

3、Flash网站  

为了知足用户的视觉体验，建站公司通常会使用Flash网站，给用户搭建企业官网，这样看起来异常雅观，但由于现在搜索引擎并不能很好的抓取与识别flash内容，往往导致站点排名很难提升。  

解决：不要做整站flash，只管将flash嵌入网页内容的一部门。  

4、限制性内容  

对于一些站点，出去吸引粉丝的目的，许多内容只有登录才气查看，稀奇是一些强制cookie的操作，这诱导与诱骗了蜘蛛，它很难识别内容，而且不停的实验抓取这个URL。  

解决：针对网站建设，只管阻止接纳这种战略，去吸引用户。  

若何识别“蜘蛛陷阱”  

对于识别蜘蛛陷阱的方式，稀奇容易，你只需要通过如下内容：  

① 网站日志：行使工具读取当日蜘蛛抓取URL的内容，若是发现特殊的URL地址，那么值得进一步关注。  

② 抓取频率：查看百度搜索资源平台中抓取频率，若是某一天数值稀奇大，那么很可能陷入蜘蛛陷阱。  

总结：常被讨论的蜘蛛陷阱另有网站框架、sessionid、各种跳转，本文只简朴讲述了现实应用中常遇到的蜘蛛陷阱，仅供参考。