看日志，需要判断真假蜘蛛，有些人对网站采集，也会产生假蜘蛛。
如果网站是动态程序，伪静态，日志记录的路径都是动态的，不会记录伪静态，纯静态的可以直接看。伪静态很难分析路径。
看日志，需要判断真假蜘蛛，有些人对网站采集，也会产生假蜘蛛。如果网站是动态程序，伪静态，日志记录的路径都是动态的，不会记录伪静态，纯静态的可以直接看。伪静态很难分析路径。通过日志，就能看到哪些页面没爬。有些页面爬，有些页面没爬？原因如下：权限设置 robots结构问题 爬取困难404也是去爬 nofollow 不传递权重，但是能爬 路径深不影响爬取信用度 供 求b2b 审核 垃圾信息太多 爬回的页面过滤 分类整理 筛选 ，建立索引。怎样过滤 ？第一剔除空页面和无意义的页面。整个页面是flash 登陆页面 注册页面 或产品页面就是一张图片，则有的是空页面，无意义的。这样的是没有必要被收录的；
内页是否有外部链接。外部链接可以对内页投票，就更好的达到收录标准。页面保留下来，就建立索引。能查到，能不能排到前面？需要seo的操作排名。想要自己写的描述被抓，想做的关键词尽量的出现在描述里面。sei培训放到描述里面，关键词放到描述里面，这样抓取几率就大。快照是一个页面的备份版本，当访问不到页面，通过快照看信息。搜索引擎的索引数据库a5 seo那个词是23号建立的，24号进行计算的，运算也是需要时间的，就会出现时间差。同样的页面一个是23 一个是24号，同样的一个结果，广州23 深圳24，地域出现这样的情况，搜索引擎的服务器有很多，不同的区域，统一数据需要时间。自然性链接，需求页面的主题是什么？相关的需求及问题，小的标题要有吸引力，要让客户看下去的理由，吸引用户快速定位他想要的东西，层次清晰。标题 切词选词有技巧。产品页面质量，产品页面是否有转化率，其他的技术文章依据需求做些，产品页面是核心的转化页面。关键词 标题 优化来说 标题不匹配关键词转化率页面 引导 直接性需求 底部做推荐性链接是没有用的。PV 转化站内的优化 用户需求 排名机会 核心的页面 产品 页面的质量 转化 产品 标题 自然性链接
标题 优化来说 标题不匹配关键词
转化率页面 引导 直接性需求