robots.txt ファイルとは何ですか?
51 の robots.txt を注意深く読み、最終的に「コブラ」の判断と結論に反論したいと思います。 すべてのサイトに robots.txt が必要ですか? 必ずしもそうではありません。状況によります。 では、robots.txt はどの検索エンジンでも使用できるのでしょうか? 必ずしもそうではありません。まず検索エンジンの概念を理解する必要があります。少なくともスパイダーは存在し、robots.txt 構文に従っています。 Baidu、Google、Yahooなどはすべて公式robots.txtに従っている。 robots.txt をどこに配置すればよいですか? ルート ディレクトリでは、http://www.abc.com/robots.txt やその他のブラウザーを参照してアクセスします。 robots.txt の書き方は? 参照: http://www.robotstxt.org/ コブラは、バイドゥが51を殺したのは51のrobots.txtのせいだと言ったからだ 「51.com 検索が消えた理由は、同社がこの機会を利用して宣伝しようとしたからでしょうか?」 (百度がメーデー前後に大規模な検査を実施し、不正サイトを禁止したため、業界では51.comも百度が処罰したサイトの一つだと考え始めた。 残念なことに、メーデーが「建国記念日」になってしまいました。 フラストレーション 2: robots.txt の記述はルールに従っており、検索エンジンもそれに従います。そうすると、上記記事のコブラの判断は間違っていることになります! 51 の robots.txt エラーではありません!
51のホームページはホームまたはこのセカンダリコーンの下にあるので、これについて話しましょう!
Disallow: /home/ (Google は 51 に対して何もしていないため、これは Baidu のみに当てはまると想定しています。また、robots.txt に従う同じ検索エンジンでない限り、後続の分析では Google の現象の一部が Baidu に適用されます。) Baidu の定義: 「Disallow:/help/」はロボットが /help.html にアクセスすることを許可するが、/help/index.html にはアクセスできないようにします。 http://www.baidu.com/search/robots.html つまり、ホーム ディレクトリにホームページがないため、http://www.51.com/home/index.htm/index.html/index.shtml を含めることはできません。 http://www.51.com/home/index.htm 404 エラー 元のタイトル: 51.com の robots.txt に何か問題がありますか? キーワード: |
<<: SEO 最適化: 「一般的な分析を安易に使用しないでください」
SEO 実践者が追いかけ、ウェッジホッピングし、調査し、疑問に思い、そして迷っていることの 1 つは...
企業のデジタル変革が加速する中、クラウド コンピューティングはかつて、熾烈なインターネット市場におけ...
SEO を行う人にとって、理解しなければならないことの 1 つは、フレンドリー リンクです。私たちは...
[[426291]]ビジネスの急速な発展とビジネスの複雑性の増大に伴い、従来のモノリシック アプリケ...
ハイパースケール クラウド リージョンは素晴らしいですが、小規模で発展途上国にクラウド サービスを導...
最近、Baidu のアルゴリズムが継続的にアップグレードされるにつれて、SEO 作業者のスキルも大幅...
データ インフラストラクチャ半導体ソリューションのリーダーである Marvell Technolog...
米国の老舗サーバー業者 Smarthost が、月額 6.95 ドルという低価格で「プール - VP...
フォーラムでは、Web マスターは、Web サイトを最適化するときに URL を静的にする必要がある...
A5ウェブマスターネットワークは9月3日、JD.comのクラウドサービスプラットフォームが8月31日...
4 コア共有 CPU、75G ハードディスク (raid10)、3072M メモリ、750G 月間ト...
ドメイン名の登録は長い間実施されてきましたが、今この話題は再び注目を集め始めています。ドメイン名が登...
モバイルインターネットの普及と「クラウド時代」の到来により、ネットワークディスクにファイルを保存した...
2018年最もホットなプロジェクト:テレマーケティングロボットがあなたの参加を待っています大学に入学...
著者:蘇奇編集者:金玉凡カイボロウファイナンス(kaiboluocaijing)昨年、「ライブストリ...