为您提供专业的网络营销策划书,网络营销策划方案,是一家专业的济南网络公司.

济南网站优化

提供网络营销方案营销策划书

济南网络营销策划公司以专业的姿态助你提升营销业绩

策划公司服务热线

什么是蜘蛛陷阱?避免蜘蛛陷阱的方法有哪些?

点击次数: 发布时间:2018-11-20 17:17文章来源:搜索引擎优化
  你知道什么是蜘蛛陷阱吗?你知道避免蜘蛛陷阱的方法有哪些吗?下面,SEO外包小编将为你介绍一下避免蜘蛛陷阱的方法,如果你想要 了解的话,就来看看小编的介绍吧。

  什么是蜘蛛陷阱?

  "蜘蛛陷阱"是阻止蜘蛛程序爬行网站的障碍物,通常是那些显示网页的技术方法,目前很多浏览器在设计的时候考虑过这些因素,所以可 能网页界面看起来非常正常,但这些蜘蛛陷阱会对蜘蛛程序造成障碍,如果消除这些蜘蛛陷阱,可以使蜘蛛程序收录更多的网页。SEO工 作中,网页被收录是基础工作,但对于搜索引擎来讲,极少情况会100%收录你网站的所有网页,搜索引擎的爬虫程序设计的再精巧,也难 以逾越所谓的蜘蛛陷阱。

  避免蜘蛛陷阱的方法有哪些?

  1、 登录要求
  有些企业站和个人站设置一定要用户注册登录后,才能看到相关的文章内容,这种对蜘蛛不是很友好,因为蜘蛛无法提交注册,更无 法输入用户名和密码登录查看内容。对于蜘蛛来说,用户直接点击查看到的内容也是蜘蛛所能看到的内容。如果你的网站有这种情况,请 取消这一功能,但网站如果有VIP用户或部分资源,是可以这样设置的。
  2、动态URL
  动态URL可以简单理解为在URL中加入过多的符号或者网址参数,虽然随着搜索引擎的技术发展,动态URL对于蜘蛛的抓取已经越来越 不是问题了,但是从搜索引擎友好度上讲,静态哪陷是伪静态相对来说都比动态URL要好。URL优化将在本章第6节中讨论。  /
  3、 框架结构
  早期框架网页到处被泛滥使用,而现在很多网站已经很少使用了,一是因为现在随着各大CMS系统的开发问世,网站维护相对越来越 简单了,早期网站使用框架是因为对网站页面的维护有一定的便利性,现在已经大可不必了,而且不利于搜索引擎收录也是框架越来越少 被使用的原因之一。
  4、强制用Cookies
  强制用Cookies对于搜索引擎来说相当于直接禁用了Cookies,而有些网站为了实现某些功能。会采取强制Cookies,例如跟踪用户访 问路径,记住用户信息,甚至是盗取用户隐私等,如果用户访问这类站点时没有启用Cookies,所显示的页面就会不正常。所以,对于蜘 蛛来讲,同样的网页无法正常访问。
  5、Flash
  有的网站页面使用Flash视觉效果是很正常的,例如用Flash做的Logo、广告、图表等,这些对搜索引擎抓取和收录是没有问题的,但 很多网站的首页是一个大的Flash文件,这种就叫蜘蛛陷阱。在蜘蛛抓取时,HTML代码中只是一个链接,并没有文字,虽然大的Flash效果 看上去很好,外观看着也很漂亮,但可惜搜素引擎看不到,无法读取任何内容,所以,为了能体现网站优化的最好效果,不提倡这种 Flash作为首页图片。
  6、各种跳转
  对搜索引擎来说,只对301跳转相对来说比较友好,对其他形式的跳转都比较敏感。如JavaScritp跳转、MetaRefresh跳转、Flash跳 转、302跳转。
  有些网站的做法很让人无奈,当打开网页后,会自动转向其他页面,如果打开的页面和你要找的页面丰体相关.+扫.笪讨很去,佃是很 大部分的网站转向让你无任何理由和目的,这种转向不推荐大家使用,如果非要做转向,只推荐用301永久跳转,可以将权重进行传递, 除此转向其他都不推荐,因为很多其他转向欺骗用户和搜索引擎,也是黑帽的一种手段,建议大家不要使用。
  7、JavaScript跳转
  虽然现在搜索引擎对于JavaScript里的链接可以跟踪,甚至尝试拆解分析,但是我们最好不要寄望于搜索引擎自己克服困难。虽然通 过JavaScript可以做一些效果不错的导航,但是CSS同样也可以做到。为了提高网站对搜索引擎的友好度,使网页能够更好地蜘蛛爬行, 尽量不要采用JavaScript当然,在SEO中,JavaScript有一个好处就是站长不希望被收录的页面或者友情链接可以采用JavaSc:npt。当然 ,有一种方法可以消除JavaScript蜘蛛程序陷阱,即使用<noscript>标签。<noscript>标签是为不支持JavaScript的浏览器提供备选的代 码。蜘蛛程序不会执行JavaScript,因此,它们通过处理<noscript>代码来代替。在SEO中,JavaScript也有一个好处就是站长不希望被 收录的页面或者友情链接可以采用JavaScript。
  8、采用session id的页面
  有的销售类站点为了分析用户的某些信息,会采用会话ID来跟踪用户。访问站点时,每个用户访问都会增加一次:?ssion id而加人 到URL中。同样,蜘蛛的每一次访问也会被当作一个新用户。每次蜘蛛访问的URL中都会加入一个。Ession id,产生同一个页面但URL不同 的情况,这种情况会产生复制内容页面,造成高度重复的内容页,同时也是最常见的蜘蛛陷阱之一。
  以上内容就是SEO外包小编为你介绍的避免蜘蛛陷阱的方法,在看过小编的介绍以后,你对此是否有了更多地一些了解呢?希望小编的介 绍对你了解SEO的相关知识有所帮助。