自我评价:走在路上的菜鸟,想着CMS|WEB|SEO,做着可以成为牛掰程序seoer的梦!

当前位置:博客 > SEO优化 > SEO十万个为什么 >

蜘蛛抓取什么情况是比较正常的

作者:灰牛站长•发布时间:2021-08-28 15:14:08•浏览
百度蜘蛛是百度搜索引擎的一个自动程序。它的作用是访问收集整理互联网上的网页、图片、视频等内容,然后分门别类建立索引数据库,使用户能在百度搜索引擎中搜索到您网站的网页、图片、视频等内容。

蜘蛛抓取和很多因素有关

第一个因素是和网站权重有关

网站数据搜索引擎比较喜欢,抓取频率比较高一些,次数比较多些.

第二个是根据你服务器/空间能够承载多少蜘蛛限定的.

蜘蛛抓取,同时派遣很多蜘蛛,但是同时抓取的时候,你的服务器线程不支持,50个页面都不能承受,比方说你只是几十块钱的空间,蜘蛛抓取几十次,直接造成网站访问超时、打不开,这个就和服务器配置有关了.

蜘蛛抓取少,网站数据比较大的情况下,建议升级服务器配置.

另外蜘蛛抓取并不是越多越好,网站持续更新,蜘蛛派遣多;如果不更新,蜘蛛抓取频率还是很高就有问题了.

因此蜘蛛抓取稳定在一个区间内是比较好/正常的,一般对于有排名,排名比较好的页面,蜘蛛会频繁重复抓取.还有就是取决你更新的频率.

蜘蛛抓取并不是越多越好,也不是说越少越好,而是稳定在一个区间,至于区间是多少,没有一个固定值.

在蜘蛛抓取异常的情况下,突然猛增,检查是不是网站被挂马,搜索引擎蜘蛛抓取页面来的次数一天只抓取10-20很正常.

但是一天只抓取一次,就存在问题了,具体什么问题根据网站情况分析.

相关文章

  • 品牌词没有排名是怎么回事

    品牌词没有排名是怎么回事

    品牌词为什么都没有排名?当品牌词无排名,如果不是新站,那么网站处于降权状态. 因为品牌词一般都是独一无二的,品牌词无排名,要考虑一个问题. 是不是一...
    2021-08-28 03.08.29
  • 快照不更新是为什么

    快照不更新是为什么

    一般的网站快照都会更新,一般在一个月至少更新一次. 为什么有的页面快照更新频繁,有的慢.这个和我们的更新频率和首页关键词/权重有关系. 需求度很小...
    2021-08-28 03.08.27
  • 排名都是首页没有内容排名怎么办

    排名都是首页没有内容排名怎么办

    因为我们在做排名的时候并不知道怎么做,所以更多注重在外链/友情链接这块. 发布内容都是一些无用内容,导致我们排名都是首页排名,其实这个时候蛮简单...
    2021-08-28 03.08.12
  • 蜘蛛老是抓取一些js图片css不抓内容怎么办

    蜘蛛老是抓取一些js图片css不抓内容怎么办

    不抓取内页/栏目页怎么办?不用理会,让蜘蛛抓取,千万不要把这些css,js,图片在robots中禁止抓取,这样是不好的,可能导致我们网站整站都不抓取. 因为css/js/图片...
    2021-08-28 03.08.19
  • 排名和收录波动很大是什么原因

    排名和收录波动很大是什么原因

    排名或者收录数据起伏不定,波动厉害. 造成原因: ①ip,友情链接存在问题,网站被挂木马或者黑链,而你不知道. 指的是对方网站被黑,过去做的违法信息导致网...
    2021-08-28 03.08.48

手机端