マイクロソフトがMicrosoft Fabricを立ち上げ、クラウドコンピューティング市場競争でアマゾンとグーグルに勝つことを目指す

Microsoft の新しいクラウド コンピューティング データおよび分析プラットフォームである Microsoft Fabric は、企業顧客が最も重要なアプリケーションのデータを保存、管理、分析できるようにする包括的なツール セットです。このプラットフォームには、データを扱うエンジニアから、データから洞察を得て意思決定を行うアナリストまで、Microsoft のすべてのデータ ユーザーに対応する製品も統合されています。

Microsoft Fabric は現在パブリック プレビュー モードであり、今後数か月以内にさらに多くの機能が追加される予定であり、Microsoft から事前に説明を受けていなかった多くの業界の専門家を驚かせています。実際にそれが重要な役割を果たすことがわかるまで、当初の判断を保留する人もいます。このプラットフォームは、少なくとも大企業へのサービス提供においては、マイクロソフト社がアマゾンやグーグルなど他のクラウドコンピューティングプロバイダーを追い抜く上で大きな進歩となる可能性があると称賛する声もある。アナリストらは、Microsoft Fabric は、Snowflake や Microsoft の緊密なパートナーである Databricks などの他のテクノロジーベンダーにも競争上のプレッシャーをもたらすだろうと述べている。

「これらすべての機能を統合することで、マイクロソフトは現時点で他のハイパースケーラーに対して確実に優位に立っている」とフォレスター・リサーチのアナリスト、ノエル・ユハンナ氏は語った。

調査会社ガートナーによれば、この発表以前からマイクロソフトはデータおよび分析ソフトウェアのリーダーだった。アナリストらは、マイクロソフトは製品の統合性と使いやすさを新たなレベルに引き上げており、短期的には競合他社が追いつくのは難しいかもしれないと述べている。

アナリストらは、Microsoft Fabric が優位な製品を提供しており、その鍵となるのは実行力だと述べている。アマゾンのAWSクラウドサービスは、総収益において依然としてMicrosoft Azureを大きくリードしており、この優位性はしばらく続くものと思われる。エンタープライズ分析とデータの分野では、Microsoft のクラウド製品が現在、機能の幅広さの点でリードしています。 「実行能力は通常、売上高によって決まる」とアマルガム・インサイツのアナリスト、ヒョン・パーク氏は言う。 「だからその数字は証明されていない。」

Microsoft Fabric の秘密のソース: OneLake

では、Microsoft Fabric が優れている点は何でしょうか?アナリストによると、これは、さまざまなソースやアプリケーションからの多種多様なデータを保存し、アクセスできるようにする OneLake と呼ばれるデータ レイクを使用して、データ アーキテクチャを簡素化および統合する Microsoft の方法であるとのこと。

このアプローチは、コスト削減、透明性、柔軟性、ガバナンス、データ品質の面で顧客に大きなメリットをもたらすと同社は述べています。 OneLake は、Microsoft 独自のソフトウェア サービスによって生成されたデータだけでなく、サードパーティ アプリケーションなどの外部ソースからのデータも保存する中央リポジトリとして設計されています。また、データの種類や形式に関係なく、一貫したエクスペリエンスとインターフェースをユーザーに提供します。これは明らかなアイデアのように聞こえるかもしれないが、Microsoft、Amazon、Google を含むほとんどのクラウド コンピューティング プロバイダーにとって実現が困難なものであった。

長年にわたり、これらのテクノロジー大手は、ビジネス インテリジェンス、データ サイエンス、機械学習、リアルタイム ストリーミングなど、さまざまなデータおよび分析タスク用のソフトウェア ツールを数十個買収または開発してきましたが、一貫性のあるシームレスなプラットフォームを構築するのではなく、これらのツールを断片的に組み合わせることがほとんどでした。

その結果、顧客は、それぞれ独自のリソース構成、価格、データ プールを持つ複雑で断片化されたツールとデータベースのセットに対処する必要があり、データ インフラストラクチャの管理に多くの時間と費用を費やす必要があるため、顧客のフラストレーションが高まり、効率が低下します。また、各サービスのコンピューティングおよびストレージ リソースに対して個別に料金を支払う顧客には「統合税」が課せられます。

Microsoft Fabric は、データのコピー 1 つ、エクスペリエンス 1 つ、インターフェイス 1 つという真の統合を実現することで、この複雑さを解消することを約束します。 「マイクロソフトがこれらすべての機能を 1 つの統合パッケージで提供していることが、今回のイノベーションの一部です」とアマルガムのパーク氏は語った。 「シンプルに聞こえますが、ほとんどのデータおよび分析ベンダーが提供しているものではありません。」

ガートナーのアナリスト、ジェイソン・メッド氏も同意する。同氏は、ガートナーの最高データ責任者に対する調査では、データと分析ツールから価値を得ていると答えたのはわずか30％程度だったと述べた。ツールを統合し、価格を下げることで、Microsoft はこれらの問題点に対処しています。

OneLakeの仕組み

Microsoft はどのようにして OneLake でこのシンプルさと統合を実現したのでしょうか?重要なのは、OneLake が Microsoft のさまざまなサービスからのすべてのデータの単一のコピーを Apache Parquet と呼ばれる共通形式で保存することです。これは、データを列に整理する業界で広く使用されているオープンソースのファイル形式です。

これにより、データのクエリと分析がより簡単かつ迅速になります。顧客がシステムにデータを追加または更新するたびに、Microsoft Fabric は元の形式に関係なく、そのデータを Parquet 形式で OneLake データ レイクに自動的に保存します。つまり、顧客は複数のソースやサービスを経由することなく、OneLake から直接データにアクセスしてクエリを実行できます。

たとえば、顧客が Microsoft 社のビジネス インテリジェンス ツール Power BI を使用して Microsoft のデータ ウェアハウス Synapse のデータを分析したい場合、Synapse にクエリを送信する必要はありません。 Power BI は OneLake からデータを取得するだけなので、サービス間のクエリ数が減り、顧客は複数のストレージとデータ バケットではなく、単一のストレージとデータ ストレージ バケットに対してのみ料金を支払うだけで済むため、コストが削減されます。

OneLakeが外部ソースからデータを取得する方法

OneLake のシンプルさと統合性は、Microsoft エコシステム外のデータにも適用されます。ここで技術的な詳細が少し変わります。OneLake は、データ テーブルを Delta Lake と呼ばれるオープン ソース形式で保存します。Delta Lake は、さまざまなソース (CSV や JSON ファイルなど) からの生データを、業界のどのコンピューティング エンジンでも分析できる共通形式に変換するメタデータ レイヤーを作成します。

DBInsightsのアナリスト、トニー・ベア氏は、同社のオープンソースの採​​用について「マイクロソフトは正しいことをしている」と語った。

同氏は、ベンダー間の競争はファイル形式に関するものではなく、ACID として知られるデータベースの正確性と一貫性の標準を実装することに関するものだと述べた。オープンフォーマットによる Fabric の統合は、この方向への一歩です。 Microsoft の Data Factory では、150 を超える構築済みコネクタが提供されており、顧客はサードパーティのサービスからのデータを簡単に変換できます。

Microsoft は、従来の時間のかかる抽出、変換、ロード (ETL) 方式に頼るのではなく、変換プロセスを自動化する方法も調査しています。

Microsoft Fabric は、Amazon がなかなか進歩できなかったマルチクラウド シナリオもサポートしています。 OneLake は、ショートカットと呼ばれる機能を通じて、Amazon の S3 ストレージと Google のストレージ (近日公開) のデータ ストレージを仮想化できます。

Microsoft Azure Data の副社長である Arun Ulagaratchagan 氏は、業界メディアとのインタビューで次のように語っています。「共有には単一のオープン フォーマットが使用されるため、これらすべてのエンジンは、データが断片化されることなくネイティブに処理できます。」同氏は、マイクロソフトは完全に保護されたフォーマットから完全にオープンなフォーマットに移行した最初の大手クラウドコンピューティングベンダーであると述べた。

ウラガラチャガン氏は、過去数年間にフォーチュン500社のうち100社と協議を行ってきたが、彼らはファブリックの低コスト、使いやすさ、そしてロックインがないという約束に最も興味を持っていると語った。

Microsoft Fabricの統合には何年もかかった

Microsoft が Microsoft Fabric をリリースするという動きは突然のように思えるかもしれないが、これは同社が 4 年以上かけてサイロを解体し、データ サービスを統合してきた成果であり、社内政治や幹部間の争いも克服する必要があった。

こうしたマイルストーンの 1 つが Synapse です。これは、データ レイクやデータ ウェアハウスなどの複数のサービスを 1 つのハブに統合します。 Microsoft Fabric は、Synapse、Power BI、その他のデータ サービスを 1 つの SaaS サービスにまとめた究極の統合です。

「これは大きな前進だと思う」とブルー・バッジ・インサイツの業界コンサルタント、アンドリュー・ブラスト氏は語った。 「これは、これまでは不可能だったほど包括的かつまとまりのあるものです。」彼は、Microsoft Fabric に関する Microsoft の動きについて言及していました。

ブラスト氏は自分が偏見を持っていることを認めている。同氏は、マイクロソフトは顧客であり、自身はマイクロソフト データ プラットフォームのプロダクト マネージャーであったため、リリース前に Microsoft Fabric を知るコンサルタント、顧客、パートナーのグループの一員であったと述べました。 Brust 氏はまた、Microsoft が Microsoft Fabric を PaaS ではなく SaaS として提供していることも重要だと述べました。つまり、データ エンジニアはコンピューティング ユニットのプロビジョニングを処理する必要がなくなり、作業が簡素化されます。彼は、Amazon と Google はこの分野でまだやるべきことがたくさんあると考えています。

データ品質はエンタープライズクラウド競争に勝つための鍵

アナリストらはまた、クラウドコンピューティングプロバイダー間の主な競争はデータ品質であり、それが顧客がより良い洞察を得て、より良い意思決定を行えるようにする要因であると強調した。

フォレスター社のアナリスト、ノエル・ユハンナ氏は、クラウドに移行してもデータ品質の問題が解決していないと不満を漏らす企業顧客を1日に3～4社と話しているという。 Yuhanna 氏は、ほとんどの企業幹部の意見を次のように要約しました。「コンピューティング、ストレージ、Kubernetes があります。それは素晴らしいことです。しかし、このシステムを本当に近代化したのでしょうか?」だからこそ、ベアリングポイント、キャップジェミニ、インフォシス、ウィプロなどのシステムインテグレーターはこれまでクラウドを通じて洞察を提供することで利益を得てきたのだ、と彼は語った。彼らには、データに基づいてレポートを作成する独自のコンサルタントがいます。

これは、Microsoft が Microsoft Fabric を推進する理由でもあります。ユハンナ氏は、データ ソースを接続することで、Microsoft Fabric はデータの一貫性と信頼性を向上させると述べました。 「データ複製における最大の課題は、データがあちこちに散らばってしまい、データの一貫性が失われてしまうことです。Microsoft Fabric は、実際にデータの一貫性を提供します」と同氏は語った。

1 つの場所を提供することで、データ管理を表示するための単一のウィンドウを提供するようなものです。 「セキュリティ、ガバナンス、統合、発見、それがすべてだ」と彼は語った。

顧客がデータにセキュリティ ルールを適用したい場合、そのほとんどを OneLake で実行できます。同社は本日発表した声明の中で、データにアクセスするすべての Microsoft Fabric ダウンストリーム アプリケーションはこれらの規則に準拠する必要があると述べた。たとえば、顧客が Power BI に機密性の高い給与情報を保存しており、その情報に特定のチームのみがアクセスできるようにしたい場合、そのようにするためのルールを設定できます。ファイルがどこにエクスポートされても同じルールが適用されます。Microsoft Fabric の外部に送信される場合でも、同じ暗号化ルールが適用されます。

マイクロソフトがレイクハウスブームに乗り出す

マイクロソフトが競合他社に遅れをとっている分野の 1 つは、いわゆる「レイクハウス」である。これは、企業データを保存するためのデータ レイクと、それを分析するためのデータ ウェアハウスという 2 つのテクノロジを組み合わせたものである。

大量のデータと分析を必要とする人工知能などのアプリケーションの台頭により、レイクハウスが人気を博しています。特に、Databricks 社は、安全でオープンな「レイクハウス」の作成の先駆者であり、多くのアナリストが業界をリードするテクノロジーであると考えています。結局のところ、DeltaLake プロトコルを作成したのは Databricks でした。

別のベンダーである Snowflake も、適切に統合された Lakehouse 製品を提供しています。マイクロソフトは Synapse ブランドによるこの分野の提供が弱かったと伝えられているが、同社は Azure クラウド プラットフォームのサポートを提供する Databricks と緊密な提携を結ぶことでこれを補ってきた。したがって、Microsoft Fabric も DeltaLake プロトコルを採用しているのも不思議ではありません。 Databricks を使用しているすべてのお客様は、引き続き Microsoft Fabric を使用します。

アナリストらによると、Microsoft Fabricの統合により、Databricks社やSnowflake社との差も縮まり、両社を追い抜くことを目指しているという。 Microsoft Fabric は、Databricks が先駆けて開発したオープン フォーマットを、より包括的な Microsoft のデータ スタックの残りの部分に拡張します。マイクロソフトのウラガラチャガン氏は、Databricks のようなプラットフォームと提携することで顧客に選択肢を提供できることを嬉しく思うと述べる一方で、マイクロソフトの Synapse がレイクハウス市場をリードするつもりであることも明らかにした。 「我々は最高の製品、最高のスイートを提供することを本当に意図しています」と彼は語った。

アナリストらは、Microsoft の単一のエクスペリエンスと SaaS 製品への移行が、Fabric の Synapse がいくつかの重要な点で飛躍するのに役立ったと述べている。 Databricks は依然として PaaS 製品であるため、データ エンジニアはさらに多くの作業を実行し、処理ジョブを実行するノードの数を指定する必要があります。

Microsoft Fabric はビジネス インテリジェンスとデータ サイエンスの強みを組み合わせ、パターン検出やワークフロー (Data Activator) などの他の機能を追加しており、これは大きな意味を持つが、Amalgam の Park 氏は、ビジネス インテリジェンスと人工知能を組み合わせることは企業にとって依然として課題であると述べた。 Microsoft は、この問題をどの競合他社よりも強力に解決するソフトウェア パッケージを提供しています。

生成AIの力はまだ実現されていない

最後に、マイクロソフトは、OpenAIへの投資から得た生成AI技術をCopilotツールの強化に活用していると述べた。 Copilot は、ユーザーがデータ レポートの読み取りやコンパイルなどのタスクを実行するのに役立ちます。 OpenAI を搭載した Copilot により、開発者やアナリストは自然言語を使用してデータに質問し、自然言語で回答を受け取ることができるようになりました。マイクロソフトのウラガラチャガン氏は、これによって生産性は向上するが、Microsoft Fabric 製品に生成 AI を適用した場合の完全な影響が現れるにはしばらく時間がかかるだろうと述べた。

結局のところ、Microsoft Fabric は顧客にとってエンドツーエンドのデータ統合の初めての体験であり、生成 AI で何ができるのかをまだ探求していませんでした。

「生成型 AI によってカスタマー ジャーニーの 1 つのステップを加速するだけでなく、ジャーニー全体を加速すると考えることができます。つまり、これは顧客がまだ発見していない機会なのです」とウラガラチャガン氏は語った。 「実際の顧客の使用状況から学び、適切な体験を得ることが重要です。」