3B戦争でロボット疑惑が浮上、360検索のユーザー数が減少

1つは検索エンジン市場を独占する巨大企業、そしてもう1つは物議を醸す侵入者。検索エンジンを巡る「3B戦争」は、第2ラウンドであるフィッシングに突入した。

数日前、百度のエンジニアが「鬼節で鬼を捕まえる」というフィッシング戦略を発表し、常にプライバシーとセキュリティを切り札としてきた360に議論の矛先を向けた。問題は、Robots と呼ばれるプロトコルにあります。 360は合意事項を遵守せず、ブラウザを直接使用してユーザーの閲覧情報を取得し、ユーザー情報の漏洩につながる可能性があるとして告発された。 「3B戦争」のライバルである百度などのインターネット企業は、従業員に360ブラウザをアンインストールするよう呼びかけている。SogouのCEOである王小川氏も、360がセキュリティ問題において審判とプレーヤーの両方であることを懸念し、ロボットプロトコルを遵守する必要があると述べた。

CNNICの最新統計によると、360 Searchがカバーする中国のネットユーザーの割合は先週の13.04%から11.61%に低下し、カバー人数は3420万人から3052万人に減少した。過去1週間で失われたユーザー数は368万人に達した。

3B戦争の第2ラウンドは、ブラウザ側でWebページ情報を直接収集することに関する論争に焦点が当てられました。デイリー・エコノミック・ニュースの調査によると、ブラウザ開発者はロボット・プロトコルを「グーグル自身が策定したプロトコル仕様」であり「業界仕様ですらない」とみなしていたという。検索エンジンによるユーザーのプライバシー権の定義は、現時点では空白となっている。

百度の「幽霊」を捕まえる独創性のない方法

8月31日、百度のエンジニアがWeiboに投稿した記事が業界で大きな議論を巻き起こした。

百度のインターネットデータ研究開発部門のマネージャーである趙明華氏は、百度のエンジニアが作成したいくつかの特別なページには外部リンクが一切ないと述べた。検索エンジンのクローラーはリンクを通じてのみウェブページをクロールできるため、このウェブページは完全に閉じられた「島」であり、検索エンジンによって捕捉されることはない。しかし驚いたことに、Baidu のエンジニアが 360 検索で上記のキーワードを入力してみると、この Web ページが検索結果の最初の行に表示され、ユーザーは直接クリックして Web ページのコンテンツを閲覧することができました。ただし、Baidu、Google、Sogou、Soso などの他のブラウザで同じコンテンツを検索した場合、対応する Web ページを返すことができません。

なぜ完全に閉じられたウェブページが360検索エンジンに捕捉されたのでしょうか？趙明華氏は、360ブラウザを使用してこのウェブページを開いたと説明しました。 360 Browser のプライバシー ポリシーには、360 Safe Browser がユーザーのコンピューターの閲覧履歴に関する有用な情報を記録すると記載されています。

Baidu は、Baidu のフィッシング プロセスが 360 Search のセキュリティ リスクを明らかにしていると考えています。つまり、ユーザーが 360 ブラウザを通じて Web ページにアクセスすると、それが個人のアカウント情報であろうと、会社のイントラネット上の機密データであろうと、360 ブラウザによって記録され、360 Search クローラーによってキャプチャされ、360 サーバーにアップロードされるということです。

ただし、360 には独自の説明があります。 360は公式Weiboで、百度がいわゆる「隔離された」データを利用してユーザーのプライバシーを漏洩したとして360を中傷したと指摘した。実際、百度のアプローチは非常にシンプルで、360クローラーに外部リンクを介してページをクロールするように誘導し、同時に他の検索エンジンをブロックし、外部リンクを遮断するだけで、いわゆる「島」が360検索だけに含まれているという錯覚を作り出すことができます。

9月2日、360の周宏義会長は「これは百度がロボットプロトコルを悪用し、360の検索市場参入を妨害している」と反応した。

百度の「鬼祭りで鬼を捕まえよう」は、インターネット業界では初めての試みではない。 2011 年の初め、Google は Bing が自社の検索結果をコピーしているのではないかと疑った際に、同様の措置を取った。

2010 年 10 月、Google は、Bing の検索結果が Google の検索結果と重複することが多くなり、同一の見出しの傾向が増加していることに気付き、Bing が Google の検索結果を盗用しているのではないかと疑った。

この仮説を検証するため、Google は昨年 12 月にフィッシング攻撃を実行しました。彼らは手動検索ランキングのために 100 個の異常な餌を選択し、これらのキーワードの検索結果を無関係なページに誘導しました。当時、約 20 人の Google エンジニアが自分のコンピューターの IE ブラウザを使用してこれらのキーワードを検索し、次に IE を通じて Google でこれらの餌を検索して、Bing を餌に誘い込みました。 2週間後、Googleのエンジニアが再びBingで餌を探したところ、仕掛けられた結果がBingの検索結果に次々と現れ始めた。BingがIEを通じてユーザーのプライベートなインターネットデータを収集し、ユーザーがアクセスしたURLを直接記録してアップロードし、検索結果に載せていることがわかった。

検索エンジンと商業ウェブサイトのゲーム

趙明華氏は、360はロボットプロトコルを回避し、ブラウザを使用してユーザーデータとインターネット行動を記録およびアップロードし、独自のURLライブラリを形成し、偽装して隠されたクローラーを使用してスナップショットをキャプチャし、検索結果を生成したと述べた。

では、ブラウザから直接 Web ページ情報を収集することは合法なのでしょうか?

実際、ロボット プロトコルは強制的な規制ではなく、検索エンジンの誕生後、インターネット業界での長い交渉の末、検索エンジンと商用サイト、一般の人々の知る権利、ユーザーのプライバシーの権利の間で達した妥協案です。

Daily Economic News によると、初期のインターネットは主に「ユーザー ウェブサイト」モデルに基づいていました。ユーザーはウェブサイトを通じて情報を入手し、ウェブサイトはユーザーのクリックを引き付けることで広告収入を生み出します。しかし、Google が検索エンジンを成功したビジネス モデルに変えたとき、多くの Web サイトの元のビジネス モデルは深刻なダメージを受けました。

自社の利益を守るため、欧米の大手ウェブサイトが団結して Google と交渉し、「やるべきことはやり、やるべきでないことはやらない」よう Google に求め、ロボット協定が成立しました。このプロトコルの核となる考え方は、ウェブマスターが直接検索してほしくないコンテンツをロボット プログラムが取得しないように要求し、ロボット プログラムを制限する具体的な方法をフォーマット コードに標準化し、それがロボット プロトコルとなることです。一般的に、Web サイトは Robots.txt ファイルを通じて Robots プロトコルを実装します。

中国におけるロボット プロトコルの使用の最も典型的な事例は、Taobao による Baidu 検索の拒否です。さらに、ユーザー登録、電子メール、その他の情報が大量に保存されており、Robots プロトコルを使用して、これらのコンテンツがインターネット上で検索されるのを防止しています。

ただし、中小規模の Web サイトのほとんどはトラフィックを増やすために検索エンジンに頼る必要があるため、通常は検索エンジンを拒否せず、Robots プロトコルを使用することはほとんどありません。昨年、JD.com（Weibo）がYitao.comのデータクロールをブロックしたとき、同社はYitao.comがRobotsプロトコルに違反していると非難した。

技術エンジニアのジョーイ氏は「日刊経済新聞」のインタビューで、グーグルと百度は自社のサーバーを使ってインターネット上のコンテンツを絶えずキャプチャし、インデックス化しているが、360のモデルは360ブラウザを使用するすべてのコンピューターを360スパイダークローラーにして、閲覧したコンテンツを360サーバーにアップロードしてインデックス化するものだと語った。

ロボット協定はどの程度拘束力がありますか?

これまで多くの「インターネット戦争」において、360 のプライバシー問題は競合他社による疑問の焦点として挙げられてきました。

2年前、Qihoo 360のネットワークエンジニア2人が、360社のシステムが収集したユーザー情報を利用し、360サーバーのクラウドコンピューティングのバックグラウンドを介して市のワンカードシステムのバックグラウンドパスワードをクラックし、リモートから自分と同僚3人のワンカードシステムに悪意を持って2,600元をチャージしました。 2011年1月、360が収集したプライバシーデータがGoogleクローラーに捕捉され、その結果得られたリンクデータ（百度でのネットユーザーによる検索キーワード、淘宝網のショッピング記録、金蝶などの企業の内部金融ネットワークデータなど）がインターネット上で「裸」にされた。

業界の疑問に対して、360は、これは百度による純粋な「誹謗中傷」であると考えている。 360は、ウェブサイトの背景や注文などの機密データがあらゆる検索エンジンに存在すると述べた。 Baidu は、360 が検索分野に参入するのを防ぎ、市場での地位を維持するために、ユーザーデータをアップロードするよう 360 を中傷するフィッシング トラップ ウェブ ページを設置しました。

しかし、多くの中立的な業界観察者は、この事件の焦点は言葉の争いではなく、「業界の自主規制」としてのロボットプロトコルに、より強力な法的制約が必要かどうかにあると考えている。

ベテランのインターネット観察者、洪波氏は、検索エンジンがロボットプロトコルを無視し、不正な情報データを直接取得していると指摘した。このような行為が法的および規制的手段によってすぐに阻止されなければ、業界に混乱を引き起こすだろう。 ”

中国には360やSogouのようにブラウザと検索の両方を扱う企業が比較的少ないため、検索エンジンとブラウザの両方を扱う大手企業であるG​​oogleと比較することができます。

ブラウザ技術者はデイリー・エコノミック・ニュースに対し、グーグルのChromeブラウザもユーザーの訪問履歴に基づいて「最も頻繁に訪問するウェブサイト」をホームページに表示するが、検索結果の最初には表示されないと語った。

実際、「3B戦争」が第2ラウンドに入ったとき、国内のインターネット大手の姿勢は変化していた。

SogouのCEOである王小川氏は、360が検索を行うことを歓迎し、業界をよりオープンにし、ネットユーザーにより多くの選択肢を与えると述べた。これまで、王小川の「3B戦争」に対する姿勢は「百度を攻撃し、360を警戒する」というものだった。

現時点で恥ずかしいのは、ロボット プロトコルが一定のレベルまで達していないことです。これに先立ち、関係政府部門が百度、360、捜狗に連絡を取り、事態の進展を把握し、仲裁して事件全体の拡大を防ごうとしているとの報道があった。現在の状況から判断すると、関係部門が360がロボットプロトコルに違反した事件を調査しています。

「いわゆるロボットプロトコルは、実際にはGoogle自身が策定したプロトコル仕様です。大手検索メーカー間の合意や統一プロトコルではありません。国内の検索エンジンサービスプロバイダーは、ロボットプロトコルに準拠することを公に約束したり、同様の合意や声明に署名したりしたことはありません。」したがって、ロボットプロトコルは国際標準どころか、業界仕様でさえありません。米国でも、真剣に受け止めているのはGoogleだけです。 「名前を明かすことを望まなかった上記のブラウザ技術者はこう語った。

「クラウド」と「エンド」の戦い

クラウド概念を重視する検索大手の百度と、クライアントを武器とする360の戦いは、非常に意味深い。

実際、Baidu が検索市場で現在の地位を獲得できた重要な理由の 1 つは、Zhidao、Baike、Tieba などの中国コンテンツ プラットフォームを構築してきたことです。 Baidu の「堀」は「クラウド」にあります。同社は本質的にメディア企業です。同社の戦略的な考え方は、単純な検索を提供するだけではなく、分類と整理の機能を備えた検索エンジンから、コンテンツを提供および整理するプラットフォームに転換することです。

「検索技術の改善だけでは見込みが限られているという前提の下、大量のコンテンツを提供することで、百度は膨大なユーザーの定着率とトラフィック源を獲得した。Googleで検索した場合でも、ホームページの結果には百度知識、百度百科事典（微博）、百度鉄馬のコンテンツが大量に含まれます」と曹躍平氏は述べた。

実際、2009年にはすでにロビン・リーは、百度は検索エンジンではなく、中国初のメディアプラットフォームであると発言していた。先日終了した百度世界大会で、ロビン・リー氏はクラウドストレージ、ビッグデータインテリジェンス、クラウドコンピューティングという3つの中核クラウド機能を初めて公開しました。

曹躍平氏の見解では、クラウドに注力することの利点は、大量のコンテンツとユーザーデータを直接取得することで、後発企業のための「堀」を構築できることです。しかし、百度は長年、顧客分野で影響力のある製品を欠いており、今回こそ360が百度を攻撃するチャンスとなる。

対照的に、360 の競争上の優位性は完全に「最終段階」にあり、市場を獲得するためにブラウザとセキュリティ ガードに依存しています。

「百度のクラウドモデルと比較すると、360の端末モデルは産業チェーンの下流にある」と曹月平氏は指摘。360にとってのリスクは、セキュリティソフトを内蔵したWindows 8など、より粘着性の高いクライアントが登場すると、360が危険にさらされることだとした。

新たに参入した検索分野では、360 のシェアが急速に低下しています。 CNNICの最新統計によると、8月27日から9月2日までの1週間で、360 Searchがカバーする中国のネットユーザーの割合は前週の13.04%から11.61%に低下し、カバー人数は3,420万人から3,052万人に減少し、ユーザー数は368万人減少した。ユーザーカバレッジ、検索数、PVシェアのいずれの点でも、360 Search は Sogou、Soso などに比べてはるかに低いです。同時に、データによると、360検索ユーザーの検索回数とPV値比率はわずか2.22％と1.47％であり、他の検索エンジンに比べて大幅に低く、360検索ユーザーの使用頻度と使用深度が非常に低いことがわかります。

原題: 3B 戦争がロボット疑惑に発展: 360 検索ユーザー数が減少

キーワード: 戦争、暴露、ロボット、疑惑、360、検索、ユーザー、複数回、ウェブマスター、ウェブサイト、ウェブサイトの宣伝、金儲け