検索エンジンスパイダーがあなたのウェブサイトを訪問しない理由

多くのウェブマスターは、ウェブサイトのログをチェックする習慣があります。その主な目的は、スパイダーがウェブサイトをクロールしている状況を分析することです。もちろん、ほとんどの人は、スパイダーがその日にクロールした回数を単純に把握するだけで、問題を見つけるのに十分です。時々、自分のウェブサイトがすでに完璧だと感じても、通常の最適化プロセス中にスパイダーが興味を示さず、人々を非常に不安にさせることがあります。

原理がわかれば、簡単に理解できます。検索エンジンはスパイダーを使用してインターネットで「獲物」を検索します。頼りにできる唯一の手がかりはリンクです。新しいリンクが見つかると、複雑なアルゴリズムに従って最終的に Web サイトをランク付けし、データベースに保存します。多くのウェブサイトは、ウェブサイトの構造が乱雑なために、スパイダーが訪問する機会を失っている可能性があります。しかし、スパイダーがウェブサイトを訪問しない原因は数多くあります。それらをまとめてみます。

画像、フラッシュなどが多すぎます。

検索エンジンはより賢くなったと言わざるを得ません。昨年、Google は画像の色とピクセル比を分析して画像のソースを見つけることができる画像検索機能を開始しました。しかし、この技術は、検索エンジンが画像内の情報を完全に認識するにはまだ不十分です。多くのウェブマスターは、検索エンジン最適化を理解していないか、ウェブサイトの美しさとコンテンツを考慮しておらず、ページに高解像度の画像やフラッシュを大量に埋め込んでいます。ウェブサイトのコンテンツが優れていても、スパイダーはそれを認識できず、迂回することしかできません。インターネットには、スパイダークローリングをシミュレートするツールが多数あります。同様の状況にあるウェブマスターは、自分のウェブサイトの情報をチェックして、スパイダーが発見できる情報と人間の目で見える情報の間にどれだけのギャップがあるかを確認できます。

ウェブサイトにリンク切れが多すぎる

スパイダーが喜んであなたのウェブサイトを訪れ、たくさんの良いコンテンツを見つけたと思ってリンクを一つずつ検索し始めると想像できます。しかし、1回、2回、3回と開かれていないリンクが大量に待機しており、訪れるたびに同じことが起こるので、スパイダーは怒って二度とあなたのページを訪問しなくなります。ほとんどのウェブサイトにはデッドリンクがあります。それらを時間内に見つけて削除できれば、問題はありません。強力な xenu を使用するか、ウェブサイトのログをチェックして 404 ステータス コードを返すものをすべて削除することができます。

上の写真は、xenu を使用して www.tcie.cn をスキャンするときのインターフェースを示しています。

バックリンクとnofollow

スパイダーがあなたのサイトを見つけて訪問できる理由は、他のウェブサイトにあなたのサイトへのリンクがあるからです。スパイダーにもっと頻繁にアクセスしてもらいたい場合は、外部リンクを設定するときに、外部リンク先のウェブサイトの重みを考慮する必要があります。インクルード数が多いほど、PR 値が高くなり、スナップショットの更新が速くなるほど、ウェブサイトの重みが高くなります。さらに、悪質なウェブマスターの中には、フレンドリーリンクを作成する際に意図的に nofollow を設定する人もいます。このような外部リンクは、スパイダーの目には役に立たないものです。ウェブサイトの外部リンクにこのような現象がある場合は、すぐに削除してください。

複雑なウェブサイトコード

ウェブサイトの構築では、コードの最適化が非常に重要です。長いコードはウェブサイトにとって意味がなく、開く速度や検索エンジンスパイダーの判断にも影響します。

ウェブサイトのロジック構造が複雑

正しいウェブサイトの論理構造は、フラットなツリー構造である必要があります。つまり、スパイダーはホームページから任意のカラム ページにアクセスでき、カラム ページから任意のコンテンツ ページにアクセスすることができます。この数は 3 回に制限する必要があります (大規模なウェブサイトでは、より多くのレイヤーを持つことができます)。ウェブサイトの階層が多すぎて、ウェブサイトの重みが十分に高くない場合、スパイダーは階層ごとに検索することに関心を持ちません。

サイトマップエラー

サイトマップは、検索エンジンがウェブサイトを完全に理解するための優れたツールです。スパイダーにとって、サイトマップは名簿のようなものです。優れたサイトマップがあれば、スパイダーはウェブサイト内の任意のページをターゲットにして訪問できます。したがって、サイトマップを作成する際には注意が必要です。インターネット上にはサイトマップを作成するためのツールも多数あります。すべてが完璧であることを確認するために、訪問者としてサイトにアクセスして検証することもできます。この記事はインターネットマーケティング会社 http://www.tcie.cn から提供されています。転載の際は出典を明記してください。

元のタイトル: 検索エンジンのスパイダーがあなたのウェブサイトを訪問しない理由

キーワード: スパイダー、検索エンジン、ウェブマスター、ウェブサイト、ウェブサイトのプロモーション、収益化