每篇文章都设置了内链,但是蜘蛛还是不抓取!言下之意就是说,文章里面的内链没有有效提升蜘蛛抓取的数量。事实上,蜘蛛抓取数量跟内链没有直接的关系!
通常情况下,每个网站的每个页面都能被蜘蛛抓取到,因为网站通常都会存在分类页面、网站地图等,这些足够提供链接入口。
那为什么文章里面都设置了内链,蜘蛛还是不来抓取呢?其中的原因不在于文章是否设置了内链,还是在于网站更新的频率、网站更新的数量,以及网站权重等等。
理论上,在网站服务器稳定的情况下,网站权重越高、更新频率越大、更新量越多,那么蜘蛛抓取就更加频繁,抓取量也会更多。
当然合理设置内链也能起到提供链接入口的作用,让蜘蛛更多的把目标页面的链接收入到待抓取链接库。只不过这里需要注意,提取了链接不等于就会都来抓取,对于待抓取链接库的链接是否抓取,什么时候来抓取,还得看搜索引擎的抓取策略。
总之而言,蜘蛛抓取数量跟内链没有直接的关系!在网站页面都有链接入口的情况下,内链的作用更多的是权重流通,尤其是文章主体内容里面的相关锚文本内链,能够有效的传递权重。
所以大家在设置文章内链的时候,更多的需要考虑客户体验,注意链接的相关性,而不是考虑提升蜘蛛抓取量。