平均每个页面有

latix60748@egvo

63.49％的no-follow链接是内部的。 36.51%是外部的。 Rel canonical：所有页面中有 24.62% 使用 rel=canonical 标签。



81 个链接。 平均 69 个内部链接 12 月 12 日 与谷歌排名的相关性： 页面权限：0.363 域名权限：0.245 将根域链接到 URL：0.306 您会注意到，该指数比我们今年发布的指数要小一些。



这是我们有意为之，为了获得最新、最高质量的内容，并删去您可能在旧索引中看到的大量垃圾内容。该指数中的 DA 和 PA 分数应该更准确（意味着准确更能代表域名或页面基于链接公平性因素在 Google 中的表现），并且这种准确度在接下来的几个指数中应该会继续提高。



我们将密切关注此事，并像往常一样在我们的指数更新发布页面上 truemoney 电话号码数据 以指标透明度的方式进行报告。 过去一年来该指数发生了什么变化？ 坦白地说：Mozscape 指数今年的日子不好过。



我们发布的速度很慢，但索引大小却增加了。 在我们深入了解事情的细节之前，先来听一个好消息：我们相信我们已经找到了根本问题，指数现在可以改善了。为了确保我们自己的安心和稳定，我们将在下个季度逐步增加指数，计划每月至少发布一次（如果可能的话更早）。



同样积极的一面是，我们在寻找问题的过程中所做的一些改进提高了我们的爬虫速度，现在我们每天的抓取网页数量已超过 10 亿个。 我们遇到了一个错误。 我们的调度代码中有一个小错误（它与创建索引的代码不同，所以我们的指标仍然很好）。



一开始，这个错误是无害的，但是由于其他几个小问题（下雨就是下雨！），它产生了滚雪球效应并导致了某些重大问题。这使得识别和追踪实际问题变得相对困难。 这个漏洞影响深远…… 该漏洞导致低价值域名被抓取的频率高于应有的频率。



发生这种情况的原因是我们在 30 天内抓取了大量低质量的网站（我们稍后会详细介绍这一点），然后为它们建立了索引。反过来，它将所有这些网站的域名权限提高到某个阈值以上，否则，当该错误是良性的时，这些网站将被忽略。



现在它们已经超过了该阈值（从 0 kDA 到 1 kDA），该错误正在对它们进行处理，并且在安排抓取时，这些域将被视为具有 DA 5 或 6。数十亿个低质量的网站填满了计划中的页面，这意味着我们抓取的页面更少了，因为我们使用了更多的预算来抓取。



低质量的网站。 ...并且索引的质量受到了影响。 我们注意到高质量域名页面正在被抓取。因此，我们开始使用更多数据来构建索引，增加爬虫群的规模，以便我们可以增加每日容量来适应较低的数量，并确保我们拥有足够多来自顶级域名的页面，从而拥有准确反映用户 PA / DA 的质量索引。



这是一个手动过程，我们犯了两次错误：一次是偏低，导致我们取消了索引＃49，一次是偏高，导致索引＃48 太大。 尽管我们积极努力地保持索引质量，但导入更多数据意味着处理数据和构建索引需要更长的时间。