アリババクラウド神龍アクセラレータエンジンがTPCx-BBで1位を獲得、2位に40%差

アリババクラウド神龍アクセラレータエンジンがTPCx-BBで1位を獲得、2位に40%差

このほど、国際標準化試験機関TPCはビッグデータ処理性能TPCx-BB SF3000の最新ランキングを発表した。アリババクラウドが独自に開発した神龍ビッグデータ加速エンジンは、2187.42BBQpmのスコアで世界記録を更新し、2位に40%以上の差をつけました。


(TPCx-BB SF3000 性能次元ランキング)


(TPCx-BB SF3000 価格/性能ランキング)


TPCx-BB は、小売シナリオに基づき、国際標準試験機関 (TPC) によってリリースされたエンドツーエンドのビッグデータ テスト ベンチマークです。主流の分散型ビッグデータ処理エンジンをサポートし、オンラインおよびオフラインのビジネスプロセス全体をシミュレートし、記述的な手続き型クエリ、データマイニング、機械学習アルゴリズムを含む 30 個のクエリステートメントを備えています。

今回、アリババクラウドは自社開発の神龍ビッグデータ加速エンジンMRACC(ApasaraCompute MapReduce Accelerator)でこのコンテストに参加しています。 MRACC は、自社開発の Shenlong アーキテクチャの特性を組み合わせることで、Spark、Hadoop、Alluxio などの一般的に使用されるビッグデータ コンポーネントを最適化し、独自のパフォーマンス上の利点を実現します。最終的には、複雑な SQL クエリ シナリオのパフォーマンスが Spark のコミュニティ バージョンと比較して 2 ~ 3 倍向上し、eRDMA を使用することで Spark のパフォーマンスが 30% 高速化されます。

具体的には、ビッグデータタスクの重いIO特性に対応して、Alibaba Cloud MRACCはクラウドのアーキテクチャ上の利点を組み合わせて、ソフトウェアのSQLエンジンの最適化、キャッシュ、ファイルのトリミング、インデックス作成などの最適化方法の使用、圧縮などの操作の異種デバイスへのオフロードの試みなど、ネットワークとストレージの観点からソフトウェアとハ​​ードウェアのアクセラレーションを実行します。また、ネットワークの高速化に eRDMA を使用し、eRDMA ネットワーク上のシャッフル ステージでデータ交換を実行することで、レイテンシが短縮され、CPU 使用率が大幅に向上します。

TPCx-BB のテスト結果は、構造化データ、半構造化データ、非構造化データを含むエンドツーエンドのビッグデータ システムの全体的な動作パフォーマンスを包括的かつ正確に反映できることが報告されています。実際の顧客シナリオの観点から、ビッグデータシステムのソフトウェアとハ​​ードウェアのパフォーマンス、コスト効率、サービス、電力消費をより包括的に評価することができ、さまざまな業界のインフラストラクチャ選択にとって重要な参考意義を持ちます。

<<:  VMware の Xinlei Zheng: オープンソースの採​​用、イノベーション = 創造性 × 実装

>>:  GitLabCI テンプレートライブラリのパイプライン最適化の実践

推薦する

Bing Core Search R&D による検索品質に関する洞察

序文: これは Bing のコア検索研究開発部門のマネージャーによる記事です。この記事では、Bing...

chicagovps-4.5ドル/1gメモリ/20g SSD/1Tトラフィック/複数のデータセンター

chicagovps からプロモーションメールが届きました。特別価格の VPS 2 台と特別価格の ...

khanwebHost: $19.99/年、KVM/1G メモリ/1 コア/30g SSD/2T または 5T、フェニックス/ドイツ/フランス

khanwebHost はパキスタンに登録された会社 (登録番号 0127931) で、2001 年...

VMware Workstation のレンダラーの脆弱性の調査

[[214684]]背景1月中旬、ZDIは2017年のコンテストのルールを発表した。そのルールにはV...

Weiboマーケティングのヒント9つ

ショートビデオ、セルフメディア、インフルエンサーのためのワンストップサービスWeibo は WeCh...

imidc: 「双方向」南アフリカ cn2 vps の簡単なレビュー。十分ではないと思われる場合は、専用サーバーを使用することもできます。

現在、欧米のCN2ネットワークは圧迫されており、帯域幅のコストも急騰しています。アジアのCN2の価格...

ウェブサイトは降格されました。ウェブサイトの日記を保存

まず、スナップショットが 26 日にロールバックされました。他のすべてが正常だったので、あまり気にし...

#windows vps# iozoom-$10/1g メモリ/30g SSD/2T トラフィック/ロサンゼルス

iozoom のクラウド VPS をご紹介します。KVM 仮想化をベースとし、通常の VPS とは異...

Kubernetes (K8S) 管理、グラフィカル インターフェース、Web UI

1. k8s管理インターフェース主なものを3つ挙げます。公式 kubernetes-dashboar...

#BlackFriday# profitserver: 50% オフのプロモーション、年間 13 ドルから、1 億トラフィック無制限の CN2 GT ネットワーク VPS

profitserver は、11 月 29 日より、感謝祭、ブラック フライデー、サイバー マンデ...

ヤオ・ジンボはどのようにしてウェブマスター界のナンバーワン起業家になったのでしょうか?

ヤオ氏はドメイン名の実業家で、「骨董品への投資に似ている」と言われるこの分野で、その嗅覚と忍耐力を発...

Baiduの外部最適化を行う方法についての考察

ウェブサイト運営の最適化のプロセスにおいて、Baidu の検索エンジン最適化は間違いなく最大の市場シ...

ウェブサイト運営を始めるには?この3つの方法は試してみる価値がある

2018年最もホットなプロジェクト:テレマーケティングロボットがあなたの参加を待っていますインターネ...

クラウドネイティブ、開発者の黄金時代

[[419048]]開発者にとって今が最高の時期です。デジタル業界は活況を呈し、従来のクラウドコンピ...

コンタボはどうですか?オーストラリアのデータセンターのクラウドサーバーの簡単なレビュー

コンタボはどうですか?オーストラリアのコンタボはどうですか? contabo は最近、オーストラリア...