クロールオーバークロールが利用可能になりました

クロールオーバークロール機能を使用すると、2つの異なるクロールを比較し、クロールの進化を表示できます。

2016年には、「トレンド」に関する以前のリリースに基づいて構築され、さまざまなクロール間のグローバルトレンドを見つける機会が与えられました。 これで、SEOの改善の完全なビューにアクセスし、特定のテーマのクロール間の違いを強調することができます。 更新されたCrawloverCrawlには、データを読み取るための新しいタイプのグラフが含まれていました。

2019年に、クロールオーバークロール機能が改善されました。 これで、次のことを調べることができます。

• 実稼働WebサイトとステージングWebサイト、またはモバイルバージョンとデスクトップバージョンなど、同じまたは類似のページを含むWebサイトの2つのバージョン。
• サイトの変更前と変更後など、2つの異なる時点での同じWebサイト。

Webサイトの2つのバージョンを比較する

2つのWebサイトを比較するために、OnCrawlは、異なるサイトのWebアドレスの違いを判別するために、2つの異なるクロールに提供する開始URLを調べます。 これらの2つのバージョンのWebサイトには、同じ（またはほぼ同じ）コンテンツが含まれていることを前提としています。 これは、比較している2つのドメイン、フォルダー、またはサブドメイン内のURLのスラッグの大部分が同じである必要があることを意味します。

比較できるサイトの例を次に示します。

開始URL間の複雑な違いについては、自動照合では不十分な場合があります。 この場合、クロールを設定するときに、チャットを通じてOnCrawlに連絡するように求めるエラーが表示されます。 特定のケースに適応するために、自動マッチングをオーバーライドすることができます。

2つの異なる時点での1つのWebサイトの比較

改善の前後やウェブサイトの大幅な変更など、2つの異なる時点で1つのウェブサイトを比較するには、次の情報を提供する必要があります。

• 同じ開始URL
• 同じ幅のクロール（同じサブドメイン探索ルール）

クロールオーバークロールを設定する方法

2つの既存のクロール間でクロールオーバークロールを実行するか、新しいクロールを作成するときに以前のクロールとの比較を要求できます。 クロールオーバークロールの作成の詳細については、OnCrawlのナレッジベースを参照してください。

クロールサンバースト上のクロールの読み方

あなたは伝統的なパイのようにサンバーストを読みます。 これらのグラフィックは、Webサイトの進化を追跡したり、クロール後にクロールしたり、Webサイトの2つのバージョン間の違い（ライブバージョン間と再構築中など）を確認したりするのに非常に役立ちます。
このマルチレベルの円グラフでは、特定のテーマに応じて2つのクロールを比較できます。

• 最初のレベルと内側の円：最初のクロール（古いクロール）に属するページを示します。
• 2番目のレベルと外側の円：内側の円の各セグメントに対応する2番目のクロール（新しいもの）のページを示します。

したがって、たとえば、最初のクロールで2番目のクロールではなくなったインデックス可能なページを簡単に見つけることができ、その逆も可能です。

このグラフの内側の円は、最初のクロールの観点（古いもの）からのページの再パーティション化を示しています。 インデックス可能なページがあり、インデックス可能なページがなく、最初のクロールには含まれていなかったが2番目のクロールには表示されたページ（灰色のセクション）があることがわかります。

次に、内側の円の各セクションについて、2回目のクロールで特定のセクションのページの再パーティションを確認できます。 内側の灰色のセクションは、それらのページが最初のクロールには存在しなかったが、2番目のクロールには表示されることを意味します（内側の灰色のセクションに属する外側の緑と赤のセクション）。

灰色のセクションは、ページが属するセルクルに応じて、ページが構造内に新しいか存在しないかを意味します。

凡例をクリックすると、表示またはフォーカスするデータを決定できます。 クロール2は、よりグローバルなビューを提供します。

内側の円を見てみましょう。

インデックス作成可能性に応じた最初のクロールでのページの分布

最初のクロールには、10 854の索引付け可能なページが含まれ、177の索引付け可能なページは含まれていません。 1 661ページは、2回目のクロールでのみ見つかりました。

次に、外側の円を見てください。 最初の円の各セグメントについて、2番目のクロールでこれらのページの分布を見つけます。

最初のクロールでインデックス化可能な10854ページのうち、2番目のクロールでインデックス化可能なのは10104ページのみです。 560はインデックスに登録できなくなり、190ページは2回目のクロール時にクロール可能なWebサイトの一部ではなくなりました。

小さなセクションに焦点を当てましょう：最初のクロールでインデックス付けできないページ

凡例を使用して、最初のクロール時にインデックス付け可能なページとWebサイト構造にないページを非表示にすることで、最初のクロール時にインデックス付けできないページにのみ集中できます。

最初のクロールからの177の索引付け不可能なページのうち、94は現在、2番目のクロールで索引付け可能であり、13は索引付け可能のままです。

最初のクロールでインデックスに登録できない177ページのうち、70ページが2番目のクロールに存在しなくなりました。 94 + 13 + 70 =177。最初のクロールから、インデックスに登録できない177ページの予想される内訳がわかります。

新しいページに焦点を当てる：2回目のクロールでのみ見つかったページ

次に、凡例を使用して、インデックス付け可能なページとインデックス付け不可能なページの両方を最初のクロールから非表示にし、このクロール中にWebサイト構造の一部ではなかったページのみを表示します。 これにより、インデックス作成の観点から新しいページのステータスを確認できます。

すべての新しいページ：1661ページ。
新しく作成された1661ページのうち、709ページはインデックスに登録できません。
新しく作成された1661ページのうち、952ページはインデックス可能です。

概要：2回目のクロールからのすべてのページ

10104ページが最初のクロールで索引付け可能でした。 11 150は、2番目のものでインデックス化できるようになりました。 最初のクロールでは177ページがインデックスに登録できませんでしたが、2番目のクロールでは1282ページがインデックスに登録できなくなりました。
1661ページが作成され、260ページが構造から削除されました。

クロールオーバークロール：利用可能なデータ

この新機能は、ビジネスの専門知識と次のタブに分かれています。

• 構造
• 内部リンク
• コンテンツ
• ステータスコード
• パフォーマンス

たとえば、[コンテンツ]セクションでは、2つのクロール間の重複の違いに重点を置いています。

また、2つのクロール間でページの深さがどのように異なるかを分析できます。 下のグラフでは、深さの違いを確認できます。

たとえば、深さ5を見ると、クロール1と2の間で、より浅いまたはより深い深さまで進んだページ、またはより浅いまたはより深い深さから来たページを見ることができます。浅い深さ（深さ4、3、または2）になりました。

これは、利用可能なものの概要にすぎません。 データエクスプローラーでは、クロール比較のために700を超えるメトリックを掘り下げることもできます。