1、URL。以百度为例，百度偏爱的url类型是域名/a/，域名/a/b/，域名/a/1.html，域名/b/1.html这几种。域名/a/b/c/，域名/a/b/c/d/，域名/1.html ，域名/2.html ，域名/3.html这几种url是蜘蛛非常不喜欢的，大家要尽力避免。另外url也要少用蜘蛛无法解析和识别的字符，且要有一定的规律，可以通过设置robots禁止百度搜索引擎抓取不规范url。

 

2、网站结构。搜索引擎蜘蛛注意各有喜好，但是选择扁平结构或者树状结构更受到蜘蛛们的欢迎。在建站或者在选择网站源码时，有时候忽略或者根本就没注意网站源码时否精简的问题，过多地存在网站代码冗余的问题，给蜘蛛爬行网站带来不便。

 

3、网站内容。注意搜索引擎蜘蛛喜欢高质量的内容，并不单指原创的内容。如果你原创的内容没有价值，也会被认为是低质量的内容。所谓高质量的内容，一方面是有价值的内容，满足用户的需求，另一方面是新鲜的内容。

 

4、更新规律。更新的时间尽量在固定的时间点，更新的频率也尽量在差不多的数量上，搜索引擎更喜欢。

 

5、外链质量。没有外链，蜘蛛爬行的入口就少，网站被收录的时间就会延长，所以我们尽量要做高质量的友链，让蜘蛛更容易爬行。