ZAC剖析搜索引擎原理和SEO核心理论。
一、搜索引擎原理
(一)爬行和抓取
1、爬行策略,深度优先,广度优先,只抓相对重要的页面。
2、如何吸引蜘蛛,包括网站页面权重,更新,外链,与首页距离。
3、爬行时的重复内容检测,百度检测到40%重复内容,大部分内容会被删除。
4、地址库。
5、避免蜘蛛陷阱,例如flash,session id,框架,跳转,动态url,js链接,登录,无限循环,强制使用cookie。