革新を続けながらクラウドデータストレージのコストを削減する 7 つの方法

[[330351]]

【51CTO.com クイック翻訳】  今はビジネスにとって厳しい時期です。不況が迫る中、企業は競争力を維持するためにテクノロジーに十分な投資をしながらも、コストを厳しく抑制する必要があります。パブリック クラウドでは、必要に応じてストレージ容量を増減するのは簡単ですが、無制限のリソースにアクセスできると、使用量とコストが急激かつ予測不能に増加する可能性があります。

これは特に分析および機械学習プロジェクトに当てはまります。データ レイクは機械学習やデータ ストリーム分析に最適であり、企業が新製品を開発し、顧客により良いサービスを提供するための効果的な方法です。しかし、データ チームはクラウドで新しいプロジェクトを簡単に開始できるため、すべてのリソースがコストに対して最適化され、費やしたすべての費用が価値あるものになるように、インフラストラクチャを綿密に管理する必要があります。現在の経済情勢では、いかなる企業も無駄を許容することはできません。

しかし、企業は無力ではありません。強力な財務ガバナンスの実践により、データ チームはイノベーションを促進しながらクラウド コストを管理または削減できます。チームがリソースを使いすぎないようにガードレールを設置し、ワークロードが適切なインスタンス タイプに一致してコスト削減が最適化されるようにすることで、無駄を減らし、重要なサービス レベル アグリーメント (SLA) への準拠を確実にすることができます。

ここでは、CIO がクラウド データ レイクのコストを管理するために使用できる 7 つのベスト プラクティスを紹介します。これにより、不確実な時期に予期せぬ請求を回避し、経費を抑えることができ、同時に企業の革新とさらなる強化が可能になります。

•監視、監視、監視。コスト管理は、どのリソースがいつ、誰によって使用されたかを正確に把握し、少なくとも毎日追跡することから始まります。ジョブ、クラスター、ユーザー レベルでの使用状況を綿密に追跡することで、無駄や非効率性を即座に特定し、必要な変更を加えることができます。見えないものは管理できません。

•異種クラスターを使用します。クラスター内のノードには、ワークロードやさまざまなインスタンスのコスト/可用性に応じて、異なるタイプのインスタンスが存在する場合があります。たとえば、クラスターにはオンデマンドインスタンスと AWS スポットインスタンス、または Google プリエンプティブ VM が含まれる場合があります。アプリケーションの回復力と可用性の要件を満たしながら最も価値のあるインフラストラクチャを使用できるように、使用状況を自動的に管理するツール (通常は DIY スクリプトの形式) を採用します。

•プロアクティブかつ自動的なスケーリング。クラスターは使用されていないときに実行されている必要はなく、必要に応じてクラスターを自動的に起動およびシャットダウンすることで、大幅なコスト削減を実現できます。 COVID-19 パンデミックの間、15 分間操作が行われなかった後にクラスターをシャットダウンし、コストを大幅に削減したお客様が少なくとも 1 社ありました。これは明らかにアプリケーションの SLA 要件に依存しますが、開発作業や概念実証作業の場合、クラスターが再起動するまでしばらく待っても問題にはなりません。

•さまざまなエンジンをテストします。多くの企業では、Spark、Hive、Presto などの複数の意思決定エンジンを使用しています。これは、それぞれが異なるタイプのワークロードに適しているためです。複数のエンジンでクエリをテストして、どれが最も速く実行されるかを確認します。これにより、エンドユーザーのパフォーマンスが向上するだけでなく、クエリ時間が短くなるということは、一般的にリソースの使用量が少なくなることを意味するため、企業にとってもメリットがあります。

•スケジュールベースのライフサイクル管理を使用します。使用パターンに合わせてシステムを自動的に作成および破棄します。たとえば、クラスターが通常午前中や取引のピーク時に満杯になる場合は、実行中のジョブを確認して、他の時間帯に実行できるジョブを確認します。

•十分に活用されていないインフラストラクチャの拡張。新しいプロジェクトやアプリケーションを立ち上げる場合、容量要件が必ずしも明確であるとは限りません。インフラストラクチャは過剰にプロビジョニングされており、実際の要件が明らかになったときに、インフラストラクチャを変更する人は誰もいませんでした。インフラストラクチャを適切なレベルにサイズ設定します。容量は予想されるピーク使用量をサポートする必要があるため、慎重な戦略策定が必要です。

•ユーザーを教育する。データ チームが幅広いビジネス ニーズと利用可能なオプションを理解していれば、コスト削減に全力を尽くすでしょう。概念実証プロジェクトには本当に r4.4xlarge インスタンスが必要ですか?おそらくそうではないでしょう。現在の状況について、またインフラの調整がなぜすべての人に利益をもたらすのかについて話し合います。あるお客様は、チームと一緒に色付きのレゴ ブロックを使用して、クラスター内のさまざまな種類のインスタンスの使用方法を示すウォークスルーを実施しました。チームを助けて、彼らがあなたを助けられるようにしてください。

クラウド コスト管理は、財務上の防御を提供しながら利用率を最適化するように設計されており、チームがセルフサービス環境で迅速に行動し、予期しないコストから保護できるようにします。これらのベスト プラクティスは、どの組織でも常に採用する必要がありますが、今日のマクロ経済環境においては特に重要です。これらのヒントを活用すれば、この困難な時期を乗り越え、いざというときに財政的に良好な状態を保つことができるでしょう。

元のタイトル: 革新を続けながらクラウド データのコストを削減する 7 つの方法

アシシュ・トゥスー

[51CTOによる翻訳。パートナーサイトに転載する場合は、元の翻訳者と出典を51CTO.comとして明記してください。