謝文：ビッグデータの時代には、少しの砂で塔が建てられ、少しの毛皮でコートが作られる

地球上のどこで石を拾っても鉄を見つけることができます。しかし、鉄鉱石が世界中どこにでもあると言うのはナンセンスです。石に含まれる鉄の含有量が一定の割合を超え、石の数が相当な規模に達したときにのみ、この石の山は鉄鉱石と呼べるようになり、人々はその採掘に投資することに興味を持つようになります。鉄鉱石があまり深く埋まっておらず、採掘と輸送のコストが高すぎず、市場に長期的かつ安定した購入需要がある場合、鉄鉱石採掘への関心は行動に変わり、収益性の高い事業活動になります。

ビッグデータの起源の分析にも同じ原則が適用されます。インターネットにはネットワークデータが存在します。インターネットユーザーの増加とインターネットサービスの多様化に伴い、インターネットデータも豊富になってきました。ウェブサイトを作成し、ニュース情報、製品、エンターテイメント ゲームなど、いくつかのサービスをリストします。それらに興味を持つユーザーがいる限り、彼らはサービス プロバイダーに使用記録を残します。これらのデータがどれほど単純で孤立したものであっても、ユーザー ID とクリックがあれば、オンライン広告ビジネス モデルをサポートできます。ユーザー登録情報と決済アカウントがあれば、電子商取引や会員制サービスのビジネスモデルにも対応可能です。インターネットの新規利用者の増加率が鈍化し、インターネットサービスの同質化が進む中、インターネットサービスプロバイダーは、広範にわたる経営から、マーケティングプロモーションの投入と産出の比率を改善することで、収益と利益の増大を図る洗練された経営へと移行せざるを得なくなっています。運用の洗練化に向けたさまざまな取り組みの中で、よく使われる手法がデータマイニングです。

これまで、ほとんどのインターネット企業は製品とサービス中心だったため、基本的に取得できるのは単一の製品とユーザー間の行動記録だけでした。製品間、ユーザー間のデータ、さらに複雑な製品ロジックとユーザー行動ロジックのデータは不足していました。業界では、これらは一般に非構造化データ、非リレーショナル データ、または断片化データと呼ばれています。したがって、一部の企業にはデータ統合と分析を行う専門家がおり、データマイニングを専門とする企業、ツール、専門サービスもいくつかありますが、全体として、データの収集、整理、マイニングのコストは、生み出される利益と比較して費用対効果が高くなく、魅力的ではありません。先ほどの貧弱な鉄鉱石と同じように、金含有量の低いデータは、規模がどれだけ大きくても、どれだけ深く掘っても、鶏の肋骨のようなもので、食べるのも味がないし、捨てるのも惜しい。

この状況はWEB2.0時代において根本的に変化しました。 FACEBOOK を例にとると、ビッグデータが日常のサービスでどのように形成されるかがわかります。まず、ユーザーはサービスを使用する前に登録する必要があります。この登録 ID は、数千万の Web サイト (FACEBOOK CONNECT) と数百万のサードパーティ アプリケーション (Open Platform) で使用できます。これにより、ユーザーの ID の確実性と一意性が確保されます。第二に、ユーザー間の直接的および間接的な双方向のインタラクティブな関係は、情報の普及と製品およびサービスのプロモーションのための明確なコンテキストと構造を備えた、動的で安定した、常に変化し発展するソーシャル ネットワークを構成します。 3 番目に、オープン プラットフォームの多数の共通標準とインターフェイスにより、多数のサードパーティ アプリケーション プロバイダーが統一されたデータ形式、構造、ロジックを使用するようになり、データの収束と統合が比較的シンプルで容易になります。 4 つ目は、ウェブサイトのアーキテクチャ (WALL や NEWFEED など) がシンプルなため、多数のプラットフォーム機能によって生成されたデータを自動的に結合でき、複雑なソーシャル データを整然と形成して整理および分析しやすくなります。第 5 に、TIMELINE、OPENGRAPH、CREDIT などの一連のメカニズムにより、多様で複雑なユーザー ネットワークの動作が、明確な時間的および空間的ロジックと追跡可能な動作ロジックを備えた動作データ チェーンに統合されます。これらすべての理由から、FACEBOOK は意識的か無意識的かにかかわらず、インターネット業界でビッグデータを生成できる最初の企業となりました。もちろん、これがビッグデータを生成する唯一の形式であるとか、ビッグデータを分析に活用することに成功しているということではありません。

ビッグデータの所有者およびユーザーになりつつある企業は Facebook だけではない。 Appleは、自社のOSとネットワーク端末でビッグデータを生成する場を作ることに力を入れています。Googleは、自社のOS、検索システム、GOOGLE+プラットフォームで多くの製品を統合し、利用可能なビッグデータを形成することに力を入れています。Amazonは、自社のネットワークプラットフォーム、クラウドコンピューティングプラットフォーム、読書端末を通じて、電子商取引の垂直分野におけるビッグデータの集積場を形成しています。国内の一部インターネット企業も、クラウドコンピューティング、入力方法、ブラウザ、ウイルス対策プラットフォーム、さまざまなトロイの木馬、クッキーなど、より低いレベルで意識的または無意識的に取り組んでおり、より多くのユーザー行動データを取得して統合しようとしています。つまり、データ構造を強化し、データの関係性を高め、さまざまな手段を通じて断片化されたデータを統合して活用することが、産業発展における重要なトレンドです。

業界全体から見ると、インターネット業界はビッグデータ時代の初期段階にあります。ビジネスモデルや運用レベルにおけるビッグデータへの依存度は、検索を除き、通信、金融、証券、保険、航空、ホテルなどの伝統的な産業に比べて全体的に低い水準となっている。しかし、インターネット業界の後発優位性も非常に明白です。他の伝統的な産業がますますインターネット化され、大多数のユーザーの日常業務や生活がますますインターネットに依存するようになるにつれて、インターネット業界が主導し、あらゆる分野を統合し、数億人のユーザーの行動パターンを包括的かつ体系的に記録・把握するビッグデータシステムが3〜5年以内に形作られるでしょう。巨大な鉄鉱石が形成されつつあります。誰が先駆者の地位を獲得し、事実上の標準を導入し、新しいサービスやビジネスモデルを開発するかは、業界関係者の洞察力、努力、そして運にかかっています。

原題：謝文：ビッグデータの時代に、少しの砂が塔を作り、少しの砂がコートを作る

キーワード: 謝文、大きな数字、時代、砂をまとめて全体に集める、小さなものをまとめて全体に集める、地球、ランダムに、拾う、一片、ウェブマスター、ウェブサイト、ウェブサイトの宣伝、お金を稼ぐ