一般来说，网站上线一个星期左右就会被搜索引擎抓取首页，可是有些站长发现自己的网站一个月还是一个页面都没收录，为什么蜘蛛不来抓取网站网页呢？导致不抓取的原因有很多，今天我们就来分享一下如何让网站有利于搜索引擎抓取？

如何让网站有利于搜索引擎抓取

一、简单明了的网站结构

搜索引擎抓取网站相当于对网站所有页面爬行一遍，那么一个简单明了结构层次分明的网站肯定是它所喜欢的，尽量保证“蜘蛛”的可读性。

（1）树型结构最优的结构即“首页—频道—详情页”；

（2）扁平首页到详情页的层次尽量少，既对抓取友好又可以很好的传递权重。

（3）网状保证每个页面都至少有一个文本链接指向，可以使网站尽可能全面的被抓取收录，内链建设同样对排序能够产生积极作用。

（4）导航为每个页面加一个导航方便用户知晓所在路径。

（5）子域与目录的选择相信有大批的站长对此有疑问，在我们看来，当内容较少并且内容相关度较高时建议以目录形式来实现，有利于权重的继承与收敛；当内容量较多并且与主站相关度略差时建议再以子域的形式来实现。

二、简洁美观的url规则

（1）唯一性网站中同一内容页只与唯一一个url相对应，过多形式的url将分散该页面的权重，并且目标url在系统中有被滤重的风险；

（2）简洁性动态参数尽量少，保证url尽量短；

（3）美观性使得用户及机器能够通过url即可判断出页面内容的主旨；url尽量短且易读使得用户能够快速理解。例如使用拼音作为目录名称；同一内容在系统中只产生唯一的url与之对应，去掉无意义的参数；如果无法保证url的唯一性，尽量使不同形式的url到目标url；防止用户输错的备用域名至主域名。

除了做好上面这两点，还一定要注意robots文件，因为搜索引擎蜘蛛来到网站第一件事就是看robots文件，如果robots文件设置了禁止抓取，那蜘蛛就不会抓取网站任何页面。所以robots文件一定要合理设置。除此之外，还可以建立sitemap地图并向搜索引擎提交，更有利于网站被抓取。

转载请注明：朝晖运营分享笔记_ 深圳SEO｜运营推广 » 什么样的网站有利于搜索引擎抓取？