robots.txt ファイルとは何ですか?
51 の robots.txt を注意深く読み、最終的に「コブラ」の判断と結論に反論したいと思います。 すべてのサイトに robots.txt が必要ですか? 必ずしもそうではありません。状況によります。 では、robots.txt はどの検索エンジンでも使用できるのでしょうか? 必ずしもそうではありません。まず検索エンジンの概念を理解する必要があります。少なくともスパイダーは存在し、robots.txt 構文に従っています。 Baidu、Google、Yahooなどはすべて公式robots.txtに従っている。 robots.txt をどこに配置すればよいですか? ルート ディレクトリでは、http://www.abc.com/robots.txt やその他のブラウザーを参照してアクセスします。 robots.txt の書き方は? 参照: http://www.robotstxt.org/ コブラは、バイドゥが51を殺したのは51のrobots.txtのせいだと言ったからだ 「51.com 検索が消えた理由は、同社がこの機会を利用して宣伝しようとしたからでしょうか?」 (百度がメーデー前後に大規模な検査を実施し、不正サイトを禁止したため、業界では51.comも百度が処罰したサイトの一つだと考え始めた。 残念なことに、メーデーが「建国記念日」になってしまいました。 フラストレーション 2: robots.txt の記述はルールに従っており、検索エンジンもそれに従います。そうすると、上記記事のコブラの判断は間違っていることになります! 51 の robots.txt エラーではありません!
51のホームページはホームまたはこのセカンダリコーンの下にあるので、これについて話しましょう!
Disallow: /home/ (Google は 51 に対して何もしていないため、これは Baidu のみに当てはまると想定しています。また、robots.txt に従う同じ検索エンジンでない限り、後続の分析では Google の現象の一部が Baidu に適用されます。) Baidu の定義: 「Disallow:/help/」はロボットが /help.html にアクセスすることを許可するが、/help/index.html にはアクセスできないようにします。 http://www.baidu.com/search/robots.html つまり、ホーム ディレクトリにホームページがないため、http://www.51.com/home/index.htm/index.html/index.shtml を含めることはできません。 http://www.51.com/home/index.htm 404 エラー 元のタイトル: 51.com の robots.txt に何か問題がありますか? キーワード: |
<<: SEO 最適化: 「一般的な分析を安易に使用しないでください」
クラウド コンピューティングをどのように使用するかは、企業のアプリケーション戦略アーキテクチャと計画...
近年、ローカル ウェブサイトが徐々に登場し、その多くは非常に人気があり成功しています。しかし、価値の...
最近、Huawei Security Emergency Response CenterとHuawe...
仮想化はメインフレームでは成熟した技術ですが、最近でもこの技術に関する議論が多く聞かれます。 CP-...
ブランドが王様であるこの時代において、患者を安定的に集めたいのであれば、まず病院のブランドを構築しな...
Vultrはどうですか? Vultr のインドのデータセンターはどうですか? Vultr India...
Racknerd VPS は、米国の格安 VPS の中でも代表的な存在であり、格安 VPS の推奨ブ...
【捜狐ITニュース】北京時間6月11日現在、従来のパソコンではなく、スマートフォンやタブレットでイン...
複雑なアプリケーションを高可用性、スケーラビリティ、移植性を備え、小さなモジュールで独立してデプロイ...
eName.cnは6月13日、Baidu Academic Searchがセカンドレベルドメイン名x...
企業がコストを抑制しながら近代化を進めるにつれ、競合する物語が収束しつつあります。クラウド コンピュ...
タイトルが示すように、この記事で共有されている方法と経験は、ウェブマスターが SEO を行う際にソフ...
約1か月の「調整」を経て、Baiduはついに昨日3月13日にウェブサイトの掲載とランキングを大幅に更...
12月24日午前、第11期全国人民代表大会常務委員会第30回会議は、「全国人民代表大会常務委員会によ...
Flipperhost から最新の VPS プロモーションが届きました。3 つの安価な VPS の構...