在前一段时间百度召开了“框计算”发布会，在百度CTO演讲的时候曾说到一句话要点亮暗网，当然百度CTO所说的暗网是指在整个互联网不被人们察觉关注的网络，点亮暗网是搜索引擎奋斗的目标，作为SEO工作者还要关注的另一个暗网就是自己网站内部不被搜索引擎收录的网页。这是站长对网站优化中要关注的一点。
1、怎么判断暗网
出现网站内部的"暗网"意味着什么?最明显的一点就是网站内部结构设计存在很大的缺陷，尤其是那些在搜索引擎中收录比例很少的情况，那网站内部结构的就很严重了。当然搜索引擎不可能对网站中的任何一个网页都会收录但是一个网站内部结构优化到位的其在搜索引擎中的收录量一定是很高的。搜索引擎爬虫光临网站的频率的表现是网站快照，一个网站内部结构优化不到位的网站其快照也是会受到影响的，有的网中看他的快照比较新但是网站内部的网页却不被收录，更有甚者在网站快照中可以看到最近发布的网页但是直接搜索网页URL或用谷歌查询语法查询却找不到网页这是网站内部暗网的一个标志，如果出现这种情况了那就要对网站内部结构进行考虑了。
2、造成暗网的原因
1>网站URL及内部结构设计
搜索引擎对网站的爬行收录是按照链接进行的，所有从事SEO甚至刚从事SEO的人都会知道的一点就是网站URL优化，网站的URL中包含有搜索引擎程序所不能识别的特殊符号以至于搜索引擎蜘在进入网站之后在爬行完所在网页中的链接之后不能再根据链接区爬行网站中的其他网页，还需要注意的一点就是网站内如结构设计不合理，在搜索引擎爬行到一个网页之后找不到能爬行到其他网页的链接那搜索引擎程序也会撤兵的，所以网站中的URL优化之最重要的一点。
2>网站中原创内容
当网站中内容有加大量转载的内容也会影响搜索引擎对网站的收录和爬行，当搜索引擎对网页爬行之后该网页中大量的搜索引擎数据库中已经有的东西拿搜索引擎为什么要再对你的网站再收录一次呢?搜索引擎数据库中也会对网站有一定的记录，长时间的转载内容也会降低搜索引擎对网站的爬行频率。
3>网站更新频率
网站的更新频率是决定搜索引擎对网站爬行频率的重要一点，从搜索引擎的对网站的快照可以发现有的网站搜索引擎会几个小时甚至更短的时间去光顾，因为里面有很多更新的网页，搜索引擎能及时的将更新的网页收录到自己的数据库中，及时的呈现到用户面前也是提高搜索引擎的用户体验。
4>网站的外部链接
除了网站内部链接优化不到位会造成暗网之外，网站外链也很重要，在搜索引擎对整个互联网按照链接进行爬行时，一个网站拥有大量的外链就会增大搜索引擎爬虫光临网站的次数。当然高质量的网站外链是前提，一个网站拥有很多的外部链接但是链接所在的网站搜索引擎爬虫光顾该网站的频率更小那网站也不会因为此链接而增大搜索引擎爬虫光临的机会。
3、如何解决暗网
就网站内部URL来说有效的方法就是URL静态化，程序语言都支持这点，大型动态网站可以URL重写或伪静态，都会增加搜索引擎对网站的收录，对于其他原因造成的暗网那就要站长及时顶起的为网站增加原创内容。当然不提倡站长增加伪原创内容，虽然伪原创会吸引搜索引擎爬虫但是会降低网站的用户体验，搜索引擎程序来了走了用户就不合算了。
点亮暗网不只是搜索引擎的目的也是所有从事SEO工作者要关注的一点。
1>搜索引擎对网站的爬行收录是按照链接进行的，所有从事SEO甚至刚从事SEO的人都会知道的一点就是网站URL优化，网站的URL中包含有搜索引擎程序所不能识别的特殊符号以至于搜索引擎蜘在进入网站之后在爬行完所在网页中的链接之后不能再根据链接区爬行网站中的其他网页，还需要注意的一点就是网站内如结构设计不合理，在搜索引擎爬行到一个网页之后找不到能爬行到其他网页的链接那搜索引擎程序也会撤兵的，所以网站优化的不止是URL而是整站优化。
2>网站中原创内容
当网站中内容有加大量转载的内容也会影响搜索引擎对网站的收录和爬行，当搜索引擎对网页爬行之后该网页中大量的搜索引擎数据库中已经有的东西拿搜索引擎为什么要再对你的网站再收录一次呢?搜索引擎数据库中也会对网站有一定的记录，长时间的转载内容也会降低搜索引擎对网站的爬行频率。站长及时顶起的为网站增加原创内容。当然不提倡站长增加伪原创内容，虽然伪原创会吸引搜索引擎爬虫但是会降低网站的用户体验，搜索引擎程序来了走了用户就不合算了。
3>网站更新频率
网站的更新频率是决定搜索引擎对网站爬行频率的重要一点，从搜索引擎的对网站的快照可以发现有的网站搜索引擎会几个小时甚至更短的时间去光顾，因为里面有很多更新的网页，搜索引擎能及时的将更新的网页收录到自己的数据库中，及时的呈现到用户面前也是提高搜索引擎的用户体验。
4>网站的外部链接
除了网站内部链接优化不到位会造成暗网之外，网站外链也很重要，在搜索引擎对整个互联网按照链接进行爬行时，一个网站拥有大量的外链就会增大搜索引擎爬虫光临网站的次数。当然高质量的网站外链是前提，一个网站拥有很多的外部链接但是链接所在的网站搜索引擎爬虫光顾该网站的频率更小那网站也不会因为此链接而增大搜索引擎爬虫光临的机会。
点亮暗网不只是搜索引擎的目的也是所有从事SEO工作者要关注的一点。
原创文章如转载如转载请注明：思静石网络营销博客 [www.peryx.cn]
