哀れなウェブマスターとロボットが語らなければならない物語

今日 Xiaomao がお話ししたいのは、すべてのウェブマスターがよく知っているロボット ファイルです。このファイルは誰もが知っていると思います。しかし、Xiaomao は、多くのウェブマスターがロボットの重要性を忘れていることに気付きました。ロボットは非常に怒り、その結果は深刻です。 Xiaomao は SEO を独学で学びました。ロボット ファイルの問題を見て、SEO の専門家に「ロボット ファイルは重要ですか?」と尋ねたところ、専門家は真剣にこう言いました。「ロボットは Web サイトを成功させることも、破壊することもできます。そのため、ロボットは依然として非常に重要です。」 Xiaomao は、ロボットがウェブマスターにとっていかに重要であるかを次の物語で伝えています。この物語は別の人に起こったことですが、Xiaomao は物語をわかりやすくするために一人称に変更しました。皆さん、これらの詳細には注意を払わないでください。

早速ですが、ロボットが当社のウェブサイトに与える影響についてお話ししたいと思います。 A5ウェブマスターグループには、Xiaomaoと仲の良い友人がいます。かつて彼のウェブサイトには何千ものインクルードがありましたが、ある日の午後、インクルードの数が突然0に減りました。当時、ウェブサイトは掲載されておらず、ウェブサイトのトラフィックもなくなっていたため、彼は非常に不安を感じていました。1か月以上懸命に作業した後、結局、それは井戸の中の月、または水の中の花であり、見ることはできても触れることはできないことに気付きました。当時、この友人は非常に落胆していたため、A5 ウェブマスター グループでチャットし、他のウェブマスターの友人に何が起こっているのかを尋ねました。彼のウェブサイトはブロックされていますが、どうすればよいのでしょうか。A5 ウェブマスター グループの友人たちは依然として非常に熱心で、多くの人が原因を調べるのを手伝いました。しばらく調査した後、全員が原因を見つけました。それは、彼のウェブサイトのロボット ファイルが Baidu スパイダーによるウェブサイト ページのクロールをブロックしていたことでした。

今、何人かの友人がこう尋ねています: なぜこんなことが起こるのか? 理由は、彼がウェブサイトを作っていたときに、ロボットファイルによって Baidu スパイダーのクロールが完全にブロックされたためです。皆さんは、ロボット ファイルのルールを記述して Baidu スパイダーをブロックしても、Baidu が依然としてクロールしていることに気づくだろうという事実を知っていると思います。その理由は非常に簡単です。結局のところ、Baidu は人間ではなく、人間ほど賢くはないため、Baidu は依然としてスパイダーをクロール ページに送信します。しかし、Web マスターは慌てる必要はありません。しばらくすると、Baidu はクロールされたページ (ロボット ファイルによってブロックされたページ) を独自のインデックス ライブラリから削除し、Baidu も検出プロセスを実行して、エラーを修正および修正します。

この友人はまた、次のように質問しました。「なぜ Baidu スパイダーをブロックするのですか？」ウェブサイトが構築されたばかりで、SEO も勉強しているので、ロボット ファイルについても知っています。新しいウェブサイトを構築するときに、Baidu スパイダーを一時的にブロックできることは理解しています。ウェブサイトが構築されたら、それを Baidu に渡し、ロボット ファイルを変更して Baidu がクロールできるようにします。おそらく彼は結局この重要なステップを忘れてしまい、苦労して作成したウェブサイトと外部リンクが一夜にして元の状態に戻ってしまったのでしょう。バカなことをしなければ死なない。その時彼は本当に苦しんでおり、気分もあまり良くなかった。

Xiaomao はこの小さな友達の経験を利用して、みんなにロボット ファイルの問題に注意を払うように思い出させたいと考えています。ロボットは非常に重要ですので、簡単に無視しないでください。ところで、ロボットファイルの作成に関する私の経験をいくつか共有したいと思います。Web サイトを立ち上げたばかりの頃は、ロボットファイルに注意を払わず、重要ではないと考えていたことを覚えています。その後、自己探求の期間を経て、子猫は自分が間違っていたことに気づきました。子猫はこの問題に注意を向け始め、宣伝したくないウェブサイト上のすべてのジャンクページと写真をブロックしました。ページは主に動的です。百度が静的ページを好むことは誰もが知っています。ウェブサイトが動的である場合、検索エンジンが複数回クロールすることになります。これは百度にとって非常に不親切であり、スパイダーの時間とリソースを無駄にします。百度はあなたのウェブサイトを好むと思いますか？他のウェブサイトから収集された写真もあります。百度はいくつかのオリジナル写真をクロールします。あなたのウェブサイトがそれらを再び使用すると、百度はあなたのウェブサイトが盗作であり、疑似オリジナルであると考えます。この結果について、子猫がここで詳しく説明する必要はありませんよね？

子猫の概要:

ここまで述べましたが、ウェブマスターの皆さんには、自分のウェブサイトのトラフィックに関係するロボット ファイルに注意するようお願いしたいです。ウェブサイトにトラフィックがないのに、なぜウェブマスターはウェブサイトを構築するのでしょうか。これは家族を支えることにも関係しています。へへ、ちょっと長くなってしまいましたね。今日はここまでにしましょう。また明日！

この記事はもともと、China Waterproof Coatings Network http://www.chinafstl.com/ Xiaomao によって公開されました。転載する場合は出典を明記してください。

原題: 惨めなウェブマスターとロボットが語る物語

キーワード: ウェブマスター、ロボット