SEO担当者はBaiduスパイダークローリング体験に注意を払う必要がある

Baidu スパイダーのクローリング エクスペリエンスは新しい用語のように聞こえますが、実際には、ユーザー エクスペリエンスと同様に、SEO 業界では非常に早い段階で登場しました。 Baidu スパイダークローリング体験は、上級 SEO 担当者の心に潜む言葉かもしれません。

Baidu スパイダーのクロール体験はどのようなものですか? 優れたコード構造、優れた URL 構造。多くのウェブマスターはデータ収集の経験があり、多くの CMS にはデータ収集機能があると思います。

Baidu スパイダーのクローリング体験は、収集ルールの作成と同じです。Web サイトのコード構造と URL 構造が適切であれば、収集ルールを簡単に作成して、この Web サイトのコンテンツ収集作業を正常に完了できます。

URL: ウェブサイトの URL が複雑な場合は、目的のページに到達するまでに 302 または 301 リダイレクトを複数回実行する必要があります。このような URL の場合、CMS を使用して収集ルールを記述すると、ルール収集の難易度が高くなりますか?一部の URL では、コンテンツ ページに到達するために JS リダイレクトも必要です。これらの URL リンクの収集ルールはどのように記述すればよいですか?

コード構造、Web サイトのリスト ページとコンテンツ ページのコードは非常に複雑です。 Word で編集したコンテンツを Web サイトのバックエンド エディターに直接コピーし、直接公開することも可能です。リスト ページは JS、iframe 埋め込みページである可能性があり、このようなコード構造では、収集ルールをどのように記述すればよいでしょうか。この Web サイトの収集をあきらめるしかないかもしれません。 Baidu Spiderでも同様です。10,000回のクロールを計画しているかもしれませんが、分析効率が低いため、3,000回しかクロールできない場合があります。

SEOER にプログラミング経験があれば、複雑なコード分析を通じて Web サイトの収集ルールを記述することも問題ありません。では、Baidu Spider はどうでしょうか? Baidu Spider はこれらのコンテンツをどのようにクロールするのでしょうか? Baidu Spider は特定の Web サイトの収集ルールを作成しません。

数日前、Loghao はスパイダーのケースを分析しました。彼のウェブサイトの Baidu スパイダー ステータス コードの 40% が 302 でした。著者は自分のウェブサイトのリンク構造を注意深く調べました。それらはすべて /xxxx で終わりました。訪問後、リンクの末尾に / が自動的に追加され、/xxxx/ になりました。 /xxxx にアクセスした後、Baidu スパイダーは 302 経由で /xxxx/ にリダイレクトします。このようなジャンプ訪問の場合、Baidu スパイダーのクロール エクスペリエンスはどのようなものなのでしょうか。答えは非常に明確です。スパイダーがもう一度訪問することになります。この Web サイトに 100 万ページある場合、スパイダーは対象のコンテンツをクロールできるようになるまでにさらに 100 万回訪問することになります。

したがって、適切な URL ルールとコード ルールにより、Baidu のクロール エクスペリエンスが大幅に向上し、含まれる可能性が高まります。

原題: SEO担当者はBaiduスパイダークローリング体験に注意を払う必要がある

キーワード: