ウェブサイトのレイアウトを調整するためのスパイダーの2つのクロール方法を知る

最近、Baidu はスパム対策ページを厳重に取り締まっており、多くのサイトのランキングに大きな変動が生じています。もちろん、私のサイトも例外ではありませんが、検索エンジンはユーザーエクスペリエンスに合わせてアルゴリズムを常に調整していると常に理解しています。これは、ユーザーの視点で自分のサイトを運営している限り、サイトのランキングが自然に悪くならないことを示しています。今日は、サイト内インクルードの観点から、ウェブサイト構造のレイアウトを変更するためにスパイダーがクロールする 2 つの一般的な方法を紹介します。

ウェブサイトのインクルードは、多くの友人にとって常に関心のあるトピックです。私たちがいつも話題にしているサイトマップの作成に加えて、無視できないもう 1 つのポイントがあります。それは、ウェブサイトの階層レイアウトです。なぜそう言うのでしょうか。次の著者は、スパイダーの 2 つのクロール方法を 1 つずつ説明します。

通常、私たちが目にする Baidu スパイダーや Google ロボットは、深さ優先方式と幅優先方式でクロールします。ここでは、皆さんに理解しやすいように、例を挙げて説明します。

1. 深さ優先クローリング

深さ優先クロールは、私の道路清掃ステーションに似ています。Web サイトのホームページ > 製品表示 > 道路清掃シリーズ。最初の選択のクロールは、このように行われます。これらの列をクロールした後、「道路清掃シリーズ」列の下の記事をクロールします。これは、家族関係に似た深さ優先戦略です。長男、次男、長男の孫、といった関係になります。

第二に、それは幅優先クローリングである

このクロール方法では、深さが常に増加します。クローラーが Web サイトにアクセスすると、一度に 1 列ずつクロールし、「会社概要」列をクロールした後、次の列に進みます。このような広範囲のクロールには、特定の理由があります。Web サイトのレイアウトに基づいて、重要なページはシード サイト (シード サイトはクローラーがクロールを開始する開始点) に比較的近い場合が多く、これは慣習と一致しています。

このように、大規模なポータルサイトでは、最も簡単に見ることができるのは、いくつかの最新ニュースであることがわかります。シードサイトに近ければ近いほど、そのページの重要性を理解できます。第二に、中国のワールドワイドウェブの深さは私たちが想像するほど深くはなく、ウェブページへのパスは複数あるため、クローラーは常に現在のページに最も近いパスを見つけることができます。関連データによると、中国のワールドワイドウェブの深さは17です。もう1つのポイントは、複数のクローラーの協力戦略です。このルールに基づくと、クロールの開始ページのほとんどはサイト内にあり、徐々にサイト外のリンクに変わり、クロールの閉鎖性は比較的強くなります。

上記の 2 つのクローリング方法に基づくと、クローラーが Web サイトに到達する時間は一定であるため、Web サイトはクローラーのクローリング時間をできるだけ節約する必要があることは容易にわかります。 1 ページのクローリング時間を短縮すると、Web サイトのクローリング量が増加し、Web サイトのインクルード量に影響し、最終的には Web サイトの SEO トラフィックに影響します。上記の 2 つの方法に従って、クローラーがクロールしたいものを簡単にクロールできるように、Web サイトのコンテンツを適切にレイアウトできます。このようなコンテンツの適切なレイアウトは、Web サイトの SEO トラフィックがボトルネックを突破するのに役立ちます。この記事はもともとHubei Chengli Group http://www.clczzc.com によって公開されました。転載の際は出典を明記してください。  

元のタイトル: ウェブサイトのレイアウトを調整するためのスパイダーの2つのクロール方法を知る

キーワード: スパイダークローリング方法、ウェブサイトのレイアウト、ウェブマスター、ウェブサイトのプロモーション、収益化