Amazon Web Services が「Smart Lake Warehouse」アーキテクチャを発表、半年間で中国で約 40 の関連サービスと機能を追加

アマゾン ウェブ サービスは6月24日、データやデータ分析などのサービスに引き続き注力し、ビッグデータの未来をリードする「スマート レイク ウェアハウス」アーキテクチャを発表しました。 2021年初頭から現在までに、SinnetとWestern Cloud Dataが運営する中国地域で合計40近くの関連サービスと機能を開始しました。 Amazon Web Services の「Smart Lake Warehouse」アーキテクチャは、Amazon Web Services の包括的かつ詳細なデータ サービスをシームレスに統合し、データ レイクとデータ ウェアハウス間のデータの移動とアクセスを可能にし、さらに、データ レイク、データ ウェアハウス、およびデータ クエリ、データ分析、機械学習などのさまざまな特別に構築されたサービス間でのオンデマンドのデータ移動を可能にし、さまざまな実際のビジネス シナリオにおける顧客のさまざまなニーズを満たす統一された継続的な全体を形成します。 Amazon Web Services の「Smart Lake Warehouse」アーキテクチャには、柔軟な拡張、専門的な構築、データ融合、深いインテリジェンス、オープンソースという 5 つの大きな特徴があります。これは、データ ソース、データ取り込み層、ストレージ層、ディレクトリ層、データ処理層、および消費層の 6 層アーキテクチャをカバーします。顧客が膨大なビジネス データに簡単に対応し、データの価値を最大限に活用できるよう支援します。

Amazon Web Services Greater ChinaのゼネラルマネージャーであるGu Fan氏は、次のように述べています。「ビッグデータが現代のビジネスに与える影響は明らかです。ユーザーはデータから洞察を得ることを期待していますが、データの指数関数的な増加、さまざまなデータソース、多様化したデータタイプなど、データの保存、処理、分析において多くの課題に直面しています。セグメント化されたアプリケーションシナリオに直面すると、現在市場に出回っている単一の汎用データソリューションではパフォーマンスが低下し、顧客の真のニーズを満たすことが困難になります。ユーザーは、使いやすさ、容易なスケーラビリティ、高性能、専用、安全でインテリジェントな機能を統合した新世代のデータ管理アーキテクチャを緊急に必要としています。Amazon Web ServicesのSmart Lake Warehouseアーキテクチャは、データレイクとデータウェアハウスの接続に基づいて、さまざまなデータサービスをさらにシームレスに統合し、異なるサービス間のスムーズなデータフローを確保し、顧客がデータの価値を最大限に高め、イノベーションを加速し、データ駆動型組織になるよう支援することに尽力しています。」

アマゾン ウェブ サービスが中国のデータ管理ソリューションのリーダーに選出

Amazon Web Services のデータおよびデータ分析サービスは、業界およびサードパーティ組織から高い評価を得続けています。以前、世界的に有名な企業成長コンサルティング会社であるサリバン・チャイナと頭宝研究所は共同で「2020年中国データ管理ソリューション市場レポート」を発表し、その中でアマゾン ウェブ サービスは革新的な技術、柔軟なデータ管理、クラウド セキュリティ、グローバルなビジネス慣行により、中国のデータ管理ソリューションのリーダーに選ばれました。このレポートでは、成長指数（機能的成長）、イノベーション指数（能力革新）、基本指数（基本的なデータ分析能力）の 3 つの側面に基づいて、競合他社のデータ管理ソリューションの競争力を評価します。 Amazon Web Services は総合力で 1 位にランクされているだけでなく、3 つの指標すべてで 1 位にランクされています。

Amazon Web Services の「Smart Lake Warehouse」アーキテクチャが「クラウド内のデータ、統合されたインテリジェンス」を実現

Amazon Web Services の「Smart Lake Warehouse」アーキテクチャは、Amazon Simple Storage Service (Amazon S3) を中央リポジトリとしてベースにデータレイクを構築し、データレイクの周囲にデータウェアハウス、機械学習、ビッグデータ処理、ログ分析などのデータサービスを含む専用の「データサービスリング」を統合し、Amazon Lake Formation、Amazon Glue、Amazon Athena、Amazon Redshift Spectrum などのツールを使用してデータレイクの構築、データの移動、管理などを行います。Amazon Web Services の「Smart Lake Warehouse」アーキテクチャには、次の 5 つの特徴があります。

柔軟な拡張性、安全性、信頼性。 Amazon Web Services の「Smart Lake Warehouse」アーキテクチャでは、データレイクのストレージ基盤として Amazon S3 を使用しているため、顧客は変化するニーズに応じてストレージ リソースを柔軟に拡張または削減できます。 Amazon S3 は 99.9999999999% (11 9s) のデータ耐久性を実現し、強力なセキュリティ、コンプライアンス、監査機能を備えています。

究極のパフォーマンスのために特別に設計されています。顧客のさまざまなデータ分析ニーズを満たすために、Amazon Web Services は、インタラクティブクエリサービス Amazon Athena、クラウドビッグデータプラットフォーム Amazon EMR、ログ分析サービス Amazon Elasticsearch Service、Amazon Kinesis、クラウドデータウェアハウス Amazon Redshift など、包括的で詳細な特別に構築されたデータ分析サービスを提供しています。これらの専用データ分析サービスは、パフォーマンス、規模、コストの間で妥協することなく、顧客に最高のパフォーマンスを提供します。 Amazon Redshift は他のエンタープライズ クラウド データ ウェアハウスよりも 3 倍コスト効率が高く、AQUA (分散ハードウェア アクセラレーション キャッシュ) により、Redshift クエリを他のクラウド データ ウェアハウスよりも最大 10 倍高速に実行できます。 Amazon EMR は、従来のローカルソリューションの半分以下のコストでビッグデータ処理および分析サービスを実行しますが、標準の Apache Spark よりも 3 倍以上高速です。

データ統合と統一されたガバナンス。 Amazon Web Services の「Smart Lake Warehouse」アーキテクチャは、データ レイクとデータ ウェアハウスを接続するだけでなく、データ レイク、データ ウェアハウス、およびその他のすべてのデータ サービスを 1 つの統一された継続的な全体に統合します。実際のアプリケーション シナリオでは、データはこれらのサービスとデータ ストレージ ソリューション間、およびオンデマンドでサービス間で移動され、サービス間でアクセスされる必要があります。 Amazon Web Services の「Smart Lake Warehouse」アーキテクチャにより、データ融合およびデータ共有時の統合セキュリティ制御とデータガバナンスの難しさが軽減されます。その中で、Amazon Glue はシームレスなデータフロー機能を提供し、Amazon Lake Formation はレイクウェアハウスを迅速に構築し、セキュリティと制御を簡素化するための包括的なデータ管理機能を提供します。

俊敏な分析と深いインテリジェンス。 Amazon Web Services は、データ、データ分析サービス、機械学習サービスをシームレスに統合し、よりスマートなサービスを顧客に提供します。たとえば、Amazon Aurora ML、Amazon Redshift ML、Neptune ML などでは、データベース開発者は使い慣れた SQL ステートメントを使用して機械学習操作を実行するだけで済みます。 Amazon Glue、Amazon Athena ML、Amazon QuickSight Q などにより、ユーザーは使い慣れたテクノロジーや自然言語を使用して機械学習を活用できるようになり、企業はデータを活用してより適切な意思決定を行えるようになります。ユーザーは、Amazon SageMaker などの機械学習サービスや、Amazon Personalize などのパーソナライズされた推奨サービスを通じて、データインテリジェンスをマイニングすることもできます。

オープンソースを採用し、双方にメリットのある結果を達成します。 Amazon EMR、Amazon Elasticserach Service、Amazon MSK など、Amazon Web Services の「Smart Lake Warehouse」アーキテクチャの主要コンポーネントのコアはすべてオープンソース コードに基づいています。インターフェースはオープンソースと完全に互換性があり、コードを変更せずに移行を実現できます。主流の管理ツールとも互換性があります。 OpenSearch はオープンな Apache2.0 ライセンスに基づいており、そのコードは完全にオープンです。ユーザーは無料でダウンロードして使用し、エンタープライズレベルの機能を利用できます。これらのサービスにより、ユーザーは変換プロセス中に非常に低い変換コストでクラウドに移行できます。

Amazon Web Servicesは世界中の何十万もの顧客にビッグデータの変革をもたらします

現在、世界中の何十万ものお客様が、データの管理と分析に Amazon Web Services を選択しています。中国では、TCL、Toyota Connected、Xinhe、DerbySoft、Anker Innovations、VenusWorld など、さまざまな業界の顧客が Amazon Web Services のデータ関連サービスを使用して、データガバナンスとデータ価値マイニングを行っています。その中で、TCLのソリューションは、Amazon Web Servicesの「Smart Lake Warehouse」アーキテクチャに基づいて構築されており、従来のデータベース、データウェアハウス、データレイクを接続し、データサイロを排除し、あらゆるカテゴリのIoTデバイスのデータとビジネスシステムを相互接続し、海外と国内のビジネスのデータを統合します。 TCL は、Amazon S3 を使用したデータレイクの構築、ビッグデータ分析サービス Amazon EMR、Amazon Redshift、機械学習サービスによるデータ分析の獲得など、Amazon Web Services の幅広いクラウドサービスを使用しています。 Amazon Web Services が特別に構築したデータ分析サービスを使用することで、以前は完成に 1 週​​間かかっていた複雑なデータ レポートが、今では 1 ～ 2 時間で完了します。毎日 300 以上のジョブが実行され、200 以上の BI レポートが生成され、運用とデジタル マーケティングを強力にサポートします。

Qiyuan World (Beijing) Information Technology Service Co., Ltd. は、大手人工知能プラットフォーム企業です。同社はディープラーニングや強化学習などのコア技術・製品を独自に開発してきた。 SaaSの形式で、国内の多くの有名ゲーム会社に仮想プレイヤーの交友関係、ゲーム製品の推奨、レベル数値設計、ゲームコンテンツ生成などのサービスを提供しています。 Qiyuan World は、Amazon Web Services のフルスタック データ分析サービスを使用して効率的な開発と展開を行い、迅速かつ安定したビジネス開発を実現しています。 Qiyuan World の CTO である Long Haitao 氏は、次のように述べています。「大手 AI 企業として、アルゴリズムの反復と製品の洗練にさらに注力したいと考えています。成熟した、安定した、メンテナンス不要のビッグデータ ホスティング サービスが必要です。Amazon Web Services のインテリジェント レイク ウェアハウスは、データ統合と特別に構築された分析ツールを通じて、アジャイルなビジネス反復を確実かつ効率的にサポートします。Amazon Kinesis は分単位の展開を実現し、数百万の QPS (1 秒あたりのクエリ レート) のストリーミング データを処理します。Amazon EMR と Amazon Managed Workflows for Apache Airflow はバッチ処理時間を 80% 短縮し、総運用コストを 50% 削減します。Amazon Glue、Amazon Athena、Amazon QuickSight などのサービスは、数秒でアドホック クエリ応答を実現します。」

Amazon Web Services は強力なパートナー ネットワークを構築し、パートナー ネットワーク メンバーを通じて業界のデータ管理ソリューションを構築しています。上海 ChiefClouds Information Technology Co., Ltd. は、中国を代表する消費者データ マーケティング プラットフォーム プロバイダーです。企業向けの消費者データプラットフォーム（CDP）を構築し、これを基にデジタルメディアやポジションオペレーション、CRM、スマートショッピングガイドなどのシナリオをカバーするオムニチャネル・フルリンクの消費者オペレーションシステムを構築します。 Chiwu Technology の創設者兼 CEO である Cheng Huayi 氏は、次のように述べています。「エンタープライズ レベルのデータ管理プラットフォームの実践者として、Amazon Web Services のインテリジェント レイク ウェアハウス アーキテクチャを高く評価しています。Amazon S3 をコア データ インフラストラクチャ プラットフォームとして使用することで、お客様にサービスを提供する際にデータのセキュリティ、信頼性、パフォーマンス、拡張性について心配する必要がなくなりました。Amazon の強力なデータ分析ツールと管理ツールの組み合わせにより、さまざまなデータを簡単に処理および分析し、機械学習を迅速かつ効率的に使用してデータ インテリジェンスをマイニングし、お客様のビジネス イノベーションに貢献できます。」

過去 6 か月間で、Amazon Web Services は中国で約 40 のデータおよびデータ分析関連のサービスと機能を追加し、Amazon Web Services のデータおよびデータ分析関連のサービス ポートフォリオをさらに強化しました。その中で、Amazon Glue 2.0 バージョンはジョブの起動時間を 10 倍短縮し、最小課金期間を 1 分に短縮します。 Amazon Athena 2.0 には、多くのパフォーマンスの改善と新機能が含まれています。 Amazon Lake Formation が寧夏地域で開始されました（昨年末に北京地域で開始）。 Amazon Redshift、Amazon EMR、Amazon Elasticsearch Service、Amazon SageMaker などでは、多くの新機能がリリースされています。

Amazon Web Services の最新テクノロジーリリースと実用的なイノベーションについて詳しく知るには、上海、北京、深センで開催される 2021 Amazon Web Services China Summit にご注目ください。その時、私たちは業界の多くの主要な技術実務家と協力し、「クラウド時代のストーリーの構築と体験の再構築」を共有します。