Google のインデックスまたは検索結果からコンテンツを削除することについての簡単な説明

「Google ウェブマスターツールから URL を削除するか、ロボットファイルを使用してスパイダーによる特定の種類のリンクのクロールをブロックすると、Google はこれらのコンテンツをインデックスライブラリから自然に削除します。」私を含め多くの人がそう思っていると思いますが、これは実際には完全に正しいわけではありません。

まず、Google 管理者の URL 削除ツールは、主に 2 種類の URL を削除するために使用されます。1 つは 404 エラー URL であり、もう 1 つはスパイダーがログファイルに大量にクロールする無効なアドレス (Web サイトの内部リンク、パラメータを含むリンクなど) です。これら 2 種類のアドレスを削除申請すると、検索結果に表示されなくなる場合があります。ただし、検索エンジンのインデックスライブラリでは、明確な HTTP 戻りコード 404 Not Found を持つページはインデックスライブラリに存在しなくなりますが、2 番目のタイプのスパイダーによって大量にクロールされた無効なアドレスは、実際にはインデックスライブラリにまだ存在します。

次に、ロボットファイルを使用してスパイダーによる特定の種類のリンクのクロールをブロックすると、Google がこれらのリンクをインデックスするのを防ぐことができます。ただし、ロボットファイルを使用してブロックするのが Google がこれらのリンクをインデックスする前か、Google がこれらのリンクをインデックスした後かによって異なります。これら 2 つの操作の効果は異なります。最初のタイプでは、Google がこれらのリンクをインデックスする前に、ロボットファイルを使用してクロールしたくないリンクをブロックします。この場合、これらのリンクはクロールされず、Google インデックスライブラリに含まれることもありません。2 番目のタイプでは、Google がこれらのリンクをインデックスした後に、ロボットファイルを使用して特定の種類のリンクをブロックします。この場合、これらの種類のリンクは Google インデックスライブラリに残りますが、スパイダーはこれらのリンクをクロールしなくなり、検索結果に表示されなくなります。同時に、スパイダーが限られたクロール量内でより意味のあるリンクをクロールできるようにすることもできます。

上記の紹介を通じて、Google のインデックスライブラリからコンテンツを削除することと、検索結果からコンテンツを削除することは 2 つの異なる概念であることを説明したいと思います。インデックスライブラリから削除されたコンテンツは、検索結果に表示されなくなりますが、検索結果から削除されたコンテンツはインデックスライブラリにまだ存在する可能性があり、Web サイトのインデックスボリュームに関する有効な統計に影響します。

したがって、Google のインデックスからコンテンツを削除する場合は、これらのコンテンツリンクがスパイダーによってクロール可能であり、これらのコンテンツリンクがロボットファイルによってブロックされないようにする必要があります。これを行うには、次の 3 つの方法があります。

（１）メタタグ

ページの<head>コードに<meta name="robots" content="noindex,follow">を追加して、ページがインデックスに登録されないようにすることができます。

（２）404点または410点

404 - ファイル、クエリ、または URL が見つかりません

410 - リソースはサーバー上で利用できなくなり、これ以上の参照はありません

これら 2 つのタグは一般的に同じものと考えられていますが、微妙な違いがあります。410 タグは通常再クロールを必要としないため、410 でマークされたリンクは 404 でマークされたリンクよりも早く Google のインデックスから削除されます。実際には、両者の微妙な違いは重要ではありませんが、410 マークをうまく使用できる場合は、410 マークが適切な選択となります。

スパイダーが 404/410 エラーリンクにクロールすると、Web サイトのログと管理者ツールのクロールエラーセクションに反映されます。このとき、URL 削除ツールを通じて削除することができ、削除されたコンテンツはインデックス化されません。

（３）301リダイレクトまたはその他の方法

301 リダイレクトは、Google のインデックスからコンテンツを削除し、古いリンクの重みの大部分を新しいリンクに移行するのにも適したオプションです。ただし、このプロセスは比較的長く、古いリンクの重みを新しいリンクに移行するのにどれくらいの時間がかかるのか、移行される重みの割合はどれくらいになるのかなど、Google は明らかにしていません。

上記内容は著者の個人的意見です。間違っている点がありましたら、ご指摘や議論をいただければ幸いです。

元のタイトル: Google のインデックスまたは検索結果からコンテンツを削除することに関する簡単な説明

キーワード: URL の削除、ウェブマスター、ウェブサイト、ウェブサイトのプロモーション、収益化

<<: テンセント、WeChatパブリックアカウントの再認証プロセスを是正する措置を講じる

>>: ウェブマスターの皆さん、現状に直面しても前進できますか?