秋名山の決戦！ Huawei Cloud Message Queue DMSがベテランドライバーKafkaと提携

秋名山の上空は一年中霧に包まれており、人が訪れることはめったにありませんが、それでもこの山はレーサーたちの楽園となっています。クラウドに最も近い 3 KB セクションは曲がりくねっていて狭く、予測不可能であるため、チャレンジャーは、高同時実行のマルチスレッド操作をサポートし、急増する膨大なデータを瞬時に正確かつ秩序正しく処理する必要があります。この極限のコースでは、伝説の車カフカは7年前のデビュー以来、長い間、いかなる敵にも遭遇していませんでした。

[[207769]]

「私はあなたの苦しみを知っています。」車の前面に巨大なマグネシウムデイジーのロゴがプリントされた新しい顔がカフカの前に現れた。

カフカ：「…あなたは誰ですか？」

謎の車: 「この 3kb ではライバルがいないのに、毎回デプロイするのにどれくらいの時間がかかりますか? バグを修正するのにどれくらい時間がかかりますか? システムのアップグレードは面倒ですか? 山を下りて平坦な道に出た後も、MQ や Redis のような古いやつらに勝つことができますか?」

カフカはデバッグしていたバグを置き、驚いて言った。「…あなたは誰ですか？何がしたいのですか？何ができるか教えてください。」

「私の名前は DMS です。私はあなたと完全に互換性があり、あなたの複雑な操作と展開を自動化しました。また、私はあなたが持っていない機能も持っています (ここでは 10,000 語省略)。あなたと私 DK が力を合わせれば、世界は私のものになります。検討してみませんか?」謎の車がそう言った。

カフカはしばらく黙って、秋名山の麓の薄暗い夜を眺め、軽く言った。「そうだね、君の言う通りだ。僕も君と一緒に行く時間だ」

DMSの機能説明は10,000語で次の通りです。

概要: 分散メッセージ サービスは、Huawei 社内での長年にわたる大規模アプリケーションの実践に基づいて Huawei Cloud PaaS によって開発された分散メッセージ ミドルウェアです。アプリケーション システムに非同期メッセージ キュー サービスを提供します。可用性の高いメッセージ バッファ キューにより、アプリケーションの分離、バースト トラフィックの処理、サード パーティとの相互運用性と統合が実現されます。大規模、高信頼性、高同時アクセス、スケーラビリティ、フルホスティングなどの特徴を備えています。 DMS はクラウド内のアプリケーション コンポーネントを分離するのに役立ち、コスト効率が非常に高くなります。 DMS はオープンソースを採用し、互換性のあるオープンソース Kafka インターフェースをサポートしているため、ユーザーはシームレスに移行してオンデマンドで使用できます。 DMS は現在パブリック ベータ版ですので、ぜひ試してみて、どのような機能があるか確認してください。さらに重要なのは、今すぐ無料で試せることです。

製品の利点

• Kafkaと完全に互換性があり、効率が向上

オープンソースに対応: ビジネスシステムはオープンソースの Kafka をベースに開発されています。シームレスな移行のために DMS Kafka キューを使用するには、少量の認証とセキュリティ構成を追加するだけで済みます。

メッセージ相互通信: 複数のメッセージ チャネルをサポートします。 DMS インターフェースは、Kafka キューにメッセージを送受信できるほか、オープンソースの Kafka クライアントを使用してメッセージを送受信することもできます。

セキュリティ保証：Huawei 独自のセキュリティ強化システムは、業務運営の追跡可能性、メッセージ保存の暗号化、テナント間の効果的な分離などの効果的なセキュリティ対策を提供します。

• 高い信頼性と可用性、安心して運用・保守が可能

高いデータ信頼性: メッセージの永続性とマルチコピー ストレージを提供し、高いデータ信頼性を確保します。

サービスの高可用性: バックグラウンドでのマルチクラスター展開により、自動障害移行とフォールト トレランスがサポートされ、主要なユーザー サービスの信頼性の高い運用が保証されます。

安心の操作とメンテナンス: 監視とアラーム、その他の操作とメンテナンスの完全なセットを提供し、障害とアラームを自動的に検出し、7 * 24 時間の手動作業を回避します。

コア機能

きめ細かな柔軟な制御: DMS は、RBAC (ロールベースのアクセス制御) と PBAC (ポリシーベースのアクセス制御) の 2 つのアクセス制御モードをサポートし、より安全で柔軟なアクセス ポリシーを提供します。メッセージ キューの粒度と API 呼び出しアクションに対するセキュリティ ポリシー アクセス制御を実装できます。 Huawei Cloud の IAM サービスと組み合わせることで、メッセージ サービスの使用に関するほぼすべてのユーザーのセキュリティ要件を満たすことができます。

マルチプロトコル アクセス: DMS は、1) REST 標準に準拠し、複数の言語でのアクセスをサポートし、クラウド内外のアクセスをサポートする HTTP アクセスなど、複数のプロトコル アクセス メソッドを提供します。 2) シンプルな TCP ベースの SDK により、より高性能なアクセス インターフェイスが提供されます。さらに、オープンソースの Kafka と互換性のあるオープン インターフェースも提供しており、ユーザーが Kafka を使用するアプリケーションをクラウドに迅速に移行するのに役立ちます。

分散型の信頼性の高いクラスターと大規模なキュー機能: 組み込みの分散クラスター テクノロジーにより、サービスのスケーラビリティが高まります。最大数のキューとスケーラブルな高性能メカニズムにより、高同時性、高性能、大規模シナリオでのアクセス機能が保証され、数百億のメッセージの蓄積とアクセス機能を簡単に実現できます。組み込みの冗長メッセージ ストレージにより、メッセージ ストレージの信頼性が確保され、サービス ノードの障害が効果的に回避されます。

デッドレター管理: デッドレターは、消費プロセス中にメッセージを正常に処理できない場合に、ユーザーにオプションのソリューションを提供し、個々のメッセージの異常により後続のメッセージが消費できず、業務の混雑が発生するのを防ぎます。 DMS は、ユーザーに視覚的なデッドレター スイッチとパラメータ構成を提供し、API インターフェイスも提供します。デッドレターキュー機能が有効になっていない場合、システムは確認に失敗したメッセージやタイムアウトしたメッセージをロールバックして再配信します。デッドレター機能が有効になっているかどうかに関係なく、DMS サービスはメッセージが失われないようにします。

カスタマイズされたメッセージ機能: DMS は、メッセージ キューのコア機能の提供に加えて、高収益、低コスト、費用対効果の高いメッセージ サービスをユーザーに提供するための追加の拡張機能も提供します。メッセージ消費リセットにより、ユーザーは消費可能な任意の時点を設定して、前方または後方の消費の進行を制御できるため、消費の柔軟性が向上します。メッセージ タグに基づくメッセージ フィルタリングにより、指定されたタグを含むメッセージを選択的に消費できます。メッセージ属性がサポートされており、各メッセージに異なる属性を設定できます。

安心の運用・保守：メッセージサービスはクラウドネイティブサービスであり、メッセージサービス全体の運用・保守はユーザーにとって透過的です。ユーザーはバックグラウンド操作やメンテナンスを気にする必要はなく、関与するメッセージ キュー インジケータに注意を払うだけで済みます。キューに入れられたメッセージの数、リクエストの数、消費されたメッセージの数、蓄積されたメッセージの数などの監視をサポートし、アラーム ルールの設定もサポートします。ユーザーは、ビジネス メッセージ キューの操作、使用状​​況、負荷状況を SMS、電子メールなどを通じて最新に取得できます。

適用可能なシナリオ

ビジネスの分離: 他のシステムに依存するビジネスの非中核部分または重要でない部分には、他のシステムからの処理結果を待つことなく、メッセージ サービスを使用します。たとえば、電子商取引の Web サイトがユーザーの注文を受け取ると、その情報はメッセージ キューに配置され、送信および配送タスクの情報がキューから読み取られて実行されます。

結果的一貫性: 2 つのシステムの状態は最終的に一貫性があり、両方が成功するか、両方が失敗します。たとえば、トランザクション システムでの高信頼性データ転送に使用して、システム間でのトランザクションの最終的な一貫性を実現し、実装の難易度とコストを削減できます。ソフトウェアを通じてチケットを予約したり、タクシーを呼んだりするなど。

ピークシフトフロー制御: 上流システムと下流システムの処理能力に差がある場合、メッセージサービスを使用してシステム間の通信データをダンプし、メッセージ蓄積バッファリング機能を提供し、下流システムがメッセージを処理できるときにメッセージを処理することで、輻輳、システムクラッシュなどの問題を軽減し、システムの可用性を向上させ、複雑さを軽減します。登録、急ぎの購入、ピーク時の予約など。

ログ同期: アプリケーションは、信頼性の高い非同期方式でログ メッセージをメッセージ サービスに同期し、他のコンポーネントを使用してログのリアルタイムまたはオフライン分析を実行します。また、キーログ情報を収集したり、アプリケーションを監視したりするためにも使用できます。ユーザーが登録時に入力した個人情報など。

雲中の秋名山の神話は今も山頂で燃え続けている。 Kafka の最高の体験は中毒性がありますが、心配な操作とメンテナンス、複雑なセキュリティ ポリシー、信頼性と使いやすさの欠如、完璧とは言えないパフォーマンス、豊富ではないメッセージ サービス機能により、ユーザーは依然として舞台裏で多くの作業を行う必要があります。古くから Kafka を使っているユーザーで、上記のような問題を抱えているなら、DMS がもたらす驚きを試してみるのもよいでしょう。さらに重要なのは、現段階では無料で使用できることです。