SEO优化需要怎么做才能赢得搜索引擎蜘蛛的爬行

       所谓的SEO优化，就是让你的网站可以被搜索引擎收录，而且能排到好的位置。那要被搜索引擎收录，首先得赢得搜索引擎蜘蛛的喜欢，蜘蛛爬行了你的网站才有可能收录。下来就来了解一下什么是搜索引擎蜘蛛，和SEO应该怎么做：

　　搜索引擎蜘蛛一般指：网络爬虫

　　网络爬虫（又被称为网页蜘蛛，网络机器人，在FOAF社区中间，更经常的称为网页追逐者），它是一种可以在无需人类干预的情况下自动进行一系列web事务处理的软件程序。是一种按照一定的规则，自动地抓取万维网信息的程序或者脚本。另外一些不常使用的名字还有蚂蚁、自动索引、模拟程序或者蠕虫。

　　搜索引擎的爬虫工作原理

　　网络 < --- > 爬虫 < --- > 网页内容库 < --- > 索引程序 < --- > 索引库 < --- > 搜索引擎 < --- > 用户

　　爬虫分类：

　　1、通用网络爬虫

       又称全网爬虫爬行对象从一些种子 URL 扩充到整个 Web，主要为门户站点搜索引擎和大型 Web 服务提供商采集数据。 由于商业原因，它们的技术细节很少公布出来。结构大致可以分为页面爬行模块 、页面分析模块、链接过滤模块、页面数据库、URL 队列、初始 URL 集合几个部分。

　　2、聚焦网络爬虫

　　又称主题网络爬虫（Topical Crawler），是指选择性地爬行那些与预先定义好的主题相关页面的网络爬虫[8]。 和通用网络爬虫相比，聚焦爬虫只需要爬行与主题相关的页面，极大地节省了硬件和网络资源，保存的页面也由于数量少而更新快，还可以很好地满足一些特定人群对特定领域信息的需求。

　　3、增量式网络爬虫

　　是指对已下载网页采取增量式更新和只爬行新产生的或者已经发生变化网页的爬虫，它能够在一定程度上保证所爬行的页面是尽可能新的页面。增量式爬虫只会在需要的时候爬行新产生或发生更新的页面 ，并不重新下载没有发生变化的页面，可有效减少数据下载量，但是增加了爬行算法的复杂度和实现难度。

　　4、Deep Web 爬虫

　　按存在方式可以分为表层网页和深层网页。表层网页是指传统搜索引擎可以索引的页面，以超链接可以到达的静态网页为主构成的 Web 页面。Deep Web 是那些大部分内容不能通过静态链接获取的、隐藏在搜索表单后的，只有用户提交一些关键词才能获得的 Web 页面。

　　5、蜘蛛陷阱

       是阻止细蛛程序爬行网站的障得物，通常是那些显示网页的技术方法，目前很多浏览器在设计的时候考虑过这些因索，所以可能网页界面看起来非常正常，但这些蜘铢陷阱会对蜘蛛程序造成障碍，如果消除这些細蛛陷阱，可以使蜘铢程序收录更多的网页• SEO工作中，网页被收录是基础工作，但对于搜索引擎来讲，极少情况会100%收录你网站的所有网页，搜索引轚的爬虫程序设计的再精巧，也难以逾越所@的蜘蛛陷阱。

　　了解了蜘蛛后，那根据蜘蛛的特点，在SEO方面应该怎么做才能讨好搜索引擎蜘蛛呢

　　1、突出重要内容

　　合理的title、description和keywords

　　title：只强调重点即可，重要关键词出现不要超过2次，而且要靠前，每个页面title要有所不同description：把网页内容高度概括到这里，长度要合理，不可过分堆砌关键词，每个页面description要有所不同，keywords：列举出几个重要关键词即可，也不可过分堆砌。

　　2、语义化书写HTML代码，符合W3C标准

　　对于搜索引擎来说，最直接面对的就是网页HTML代码，如果代码写的语义化，搜索引擎就会很容易的读懂该网页要表达的意思。

　　3、利用布局，把重要内容HTML代码放在最前

　　搜索引擎抓取HTML内容是从上到下，利用这一特点，可以让主要代码优先读取，让爬虫最先抓取。

　　4、重要内容不要用JS输出

　　爬虫不会读取JS里的内容，所以重要内容必须放在HTML里。

　　5、尽少使用iframe框架

　　搜索引擎不会抓取到iframe里的内容，重要内容不要放在框架中。不过现在都用DIV+CSS，框架已经很少用到了。

　　6、为图片加上alt属性

　　alt属性的作用是当图片无法显示时以文字作为代替显示出来，对于SEO来说，它可以令搜索引擎有机会索引你网站的图片。

　　7、需要强调的地方可以加上title属性

　　在进行SEO优化时，适合将alt属性设置为图片本来的含义，而将 ttitle属性为设置该属性的元素提供建议性的信息。

　　8、为图片加上长宽

　　图片有具体的尺寸，而不是按比例缩放的，会排在前面一点。

　　9、保留文字效果

　　如果需要兼顾用户体验和SEO效果，在必须用图片的地方，例如个性字体的标题，我们可以利用样式控制，让文本文字不会出现在浏览器上，但在网页代码中是有该标题的。

　　注意：不可使用display:none;的方法让文字隐藏，因为搜索引擎会过滤掉display:none;里边的内容，就不会被蜘蛛检索了。

　　10、提高网站速度

　　网站速度是搜索引擎排序的一个重要指标，网页图片、代码尽量精简，网页以静态输出，对于指向外部网站的链接要使用rel="nofollow"属性告诉爬虫不要去爬其他的页面。