如题所述
当百度来你网站的时候,看到你网站上没有新文章,这样下次都不好好的来了,他是通过外链和友情链接来到你网站的,蜘蛛判断网站更新的方法夫唯老师讲过:
1、304页面http状态码 当蜘蛛第二次请求页面访问的时候,该页面如果未更新,则会反馈一个304代码,而搜索引擎也会利用这个304 http状态码来进行判断页面是否更新。
2、Last-Modified文件最后修改时间 这是http头部信息中的一个属性,主要是记录页面最后一次的修改时间,往往我们会发现,一些权重很高的站点,及时页面内容不更新,但是快照却还是能够每日更新,这其中就有Last-Modified的作用。 不过需要注意的是,Last-Modified默认只存在于静态页面,对于二级页,通常不返回,因此Last-Modified只是蜘蛛判断页面是否更新的一个参考值,而不是条件。
3、比对文件大小搜索引擎还会取出之前页面文件,和现在的文件进行对比,不过因为大部分站点都是一种替换式更新,往往比对文件大小很难说明问题,因此常见与页面链接变化配合使用。
1、304页面http状态码 当蜘蛛第二次请求页面访问的时候,该页面如果未更新,则会反馈一个304代码,而搜索引擎也会利用这个304 http状态码来进行判断页面是否更新。
2、Last-Modified文件最后修改时间 这是http头部信息中的一个属性,主要是记录页面最后一次的修改时间,往往我们会发现,一些权重很高的站点,及时页面内容不更新,但是快照却还是能够每日更新,这其中就有Last-Modified的作用。 不过需要注意的是,Last-Modified默认只存在于静态页面,对于二级页,通常不返回,因此Last-Modified只是蜘蛛判断页面是否更新的一个参考值,而不是条件。
3、比对文件大小搜索引擎还会取出之前页面文件,和现在的文件进行对比,不过因为大部分站点都是一种替换式更新,往往比对文件大小很难说明问题,因此常见与页面链接变化配合使用。
温馨提示:答案为网友推荐,仅供参考
第1个回答 2018-12-18
蜘蛛定时爬你的网站,发现新的链接就是更新了。网站更新的速率快,蜘蛛爬的频率就高。一些门户站一小时就爬几次,而经常不更新得网站,一两天才爬一次。本回答被网友采纳
第2个回答 2018-12-18
在你的网站目录放上sitemap.xml的地图文件,更新了文章,地图文件也会跟着更新,