JVM で CMS GC が発生する状況は 5 つありますが、そのすべてを知っている人はおそらくいないでしょう。

JVM で CMS GC が発生する状況は 5 つありますが、そのすべてを知っている人はおそらくいないでしょう。

学生から、アプリケーション内の Old Gen の使用率が CMSInitiatingOccupancyFraction パラメータで設定されたしきい値に達していないのに、なぜ CMS GC がトリガーされるのかとよく質問されます。彼らは、それは非常に奇妙であり、どこに問題があるのか​​わからないと言います。

[[267920]]

実際、CMS GC には、CMSInitiatingOccupancyFraction しきい値トリガーだけでなく、多くのトリガー条件があります。この記事では、ソース コードを通じて CMS GC をトリガーする条件を包括的に整理し、日常生活で遭遇する奇妙な CMS GC の問題を理解できるようにします。

皆さんの注意を引くために、まずいくつか質問をさせてください。

  • Old Gen の使用率が 50% しかないのに、なぜ CMS GC が実行されるのでしょうか?
  • Metaspace の使用によって CMS GC もトリガーされますか?
  • Old Gen の使用率が非常に小さいのに CMS GC が実行される理由は何ですか?

トリガー条件

CMS GC は実装上、フォアグラウンド コレクターとバックグラウンド コレクターに分かれています。フォアグラウンド コレクターは比較的単純ですが、バックグラウンド コレクターはより複雑で、状況も多くなります。

次に、フォアグラウンド コレクターとバックグラウンド コレクターのトリガー条件をそれぞれ説明します。

注: この記事はJDK 8に基づいています

注: この記事では、CMS GC のトリガー条件についてのみ説明します。アルゴリズムの具体的なプロセスと、MSC (マーク スイープ コンパクション) をいつ実行するかは、この記事の範囲外です。

フォアグラウンドコレクター

フォアグラウンドコレクターのトリガー条件は比較的単純です。通常、オブジェクトが割り当てられているが十分なスペースがない場合は、GC が直接トリガーされ、すぐにスペースが再利用されます。使用されるアルゴリズムは、圧縮なしのマークスイープです。

背景コレクター

バックグラウンド コレクターのトリガー条件を説明する前に、まずバックグラウンド コレクターのプロセスについて説明します。 CMS バックグラウンド スレッドを継続的にスキャンします。主なプロセスは、バックグラウンド コレクターのトリガー条件が満たされているかどうかを判断することです。条件が満たされると、バックグラウンド収集が実行されます。

  1.  void ConcurrentMarkSweepThread::run() {
  2.  ...//省略
  3. 終了する必要がありますが、
  4. 次のサイクルの前にスリープします。
  5.  if (_should_terminate) break;
  6.  GCCause::Cause 原因 = _collector->_full_gc_requested?
  7.  _collector->_full_gc_cause : GCCause::_cms_concurrent_mark;
  8.  _collector->collect_in_background( false 、原因);
  9.  }
  10.  ...//省略
  11. }

各スキャン中、まず CMSWaitDuration 時間待機し、次に shouldConcurrentCollect 判定を実行して、CMS バックグラウンド コレクターのトリガー条件が満たされているかどうかを確認します。 CMSWaitDuration のデフォルト時間は 2 秒です (ビジネスでは CMS GC が頻繁に発生します。各 CMS GC 間の時間間隔に注意してください。2 秒の場合、基本的に CMS のバックグラウンド コレクターであると判断できます)。

  1.  void ConcurrentMarkSweepThread::sleepBeforeNextCycle() {
  2.  （！_終了する必要があります）{
  3.  (CMS増分モード)の場合{
  4.  icms_wait();
  5.  CMSWaitDuration >= 0 の場合
  6. //次の同期GC、つまり同時フルGCまで待機します
  7. // リクエストまたはタイムアウトのいずれか早い方。
  8. 清掃のためにcms_lock_on_scavengeを待機します(CMSWaitDuration);
  9.  }
  10. 戻る;
  11.  }それ以外{
  12.  CMSWaitDuration >= 0 の場合
  13. //次の同期GC、つまり同時フルGCまで待機します
  14. // リクエストまたはタイムアウトのいずれか早い方。
  15. ロック解除のために CMS ロックを待機します。
  16.  }それ以外{
  17.  // cms_lockイベントが発生するか、  チェック間隔は  shouldConcurrentCollectを永続的に呼び出す
  18. wait_on_cms_lock(CMSチェック間隔);
  19.  }
  20.  }
  21.  // CMS 収集サイクルを開始する必要があるかどうかを確認します
  22. _collector->shouldConcurrentCollect() の場合 {
  23. 戻る;
  24.  }
  25.  // .. コレクション基準がまだ満たされていないので、戻りましょう
  26. //そしてもう少し待つ
  27. }
  28.  }

では、shouldConcurrentCollect() メソッドの条件は何でしょうか?

  1. ブールCMSCollector::shouldConcurrentCollect() {
  2.  //*** トリガー状況
  3. _full_gc_requested の場合 {
  4.  if (Verbose && PrintGCDetails) {
  5.  gclog_or_tty->print_cr( "CMSCollector: 明示的な " のため収集します 
  6.  「 gc リクエスト (または gc_locker)」 );
  7.  }
  8. 戻る 真実;
  9.  }
  10.  // デバッグのために、コレクションのタイプを変更します。
  11.  // 回転が ない 同時収集について
  12. // 型の場合、同時コレクションを開始しないでください。
  13.  NOT_PRODUCT(
  14.  if (RotateCMSCollectionTypes &&
  15.  (_cmsGen->debug_collection_type() !=
  16. コンカレントマークスイープ生成::コンカレントコレクションタイプ)) {
  17. アサート(_cmsGen->debug_collection_type() !=
  18.  ConcurrentMarkSweepGeneration::Unknown_collection_type、
  19.  「CMS コレクション タイプが不正です」 );
  20. 戻る 間違い;
  21.  }
  22.  ）
  23. フリーリストロッカー x(これ);
  24.  // -------------------------------------------------------------------------------  
  25.  // 開始に影響する多くの情報を出力します 
  26.  // コレクション。
  27.  PrintCMSInitiationStatistics が stats().valid() の場合 {
  28.  gclog_or_tty->print( "CMSCollector は同時収集する必要があります: " );
  29.  gclog_or_tty->スタンプ();
  30.  gclog_or_tty->print_cr( "" );
  31. 統計情報()。print_on(gclog_or_tty);
  32.  gclog_or_tty->print_cr( "cms_gen_full までの時間 %3.7f" ,
  33. 統計()。cms_gen_full()までの時間。
  34.  gclog_or_tty->print_cr( "free=" SIZE_FORMAT, _cmsGen-> free ());
  35.  gclog_or_tty->print_cr( "連続利用可能=" SIZE_FORMAT,
  36.  _cmsGen->連続利用可能());
  37.  gclog_or_tty->print_cr( "promotion_rate=%g" , stats().promotion_rate());
  38.  gclog_or_tty->print_cr( "cms_allocation_rate=%g" 、 stats().cms_allocation_rate());
  39.  gclog_or_tty->print_cr( "占有率=%3.7f" 、 _cmsGen->占有率());
  40.  gclog_or_tty->print_cr( "initiatingOccupancy=%3.7f" 、 _cmsGen->initiating_occupancy());
  41.  gclog_or_tty->print_cr( "メタデータが%dに初期化されました" ,
  42.  MetaspaceGC::should_concurrent_collect() を使用します。
  43.  }
  44.  // -------------------------------------------------------------------------------  
  45.  // 2番目のトリガー状況
  46. // 推定時間  CMS コレクションを完了する (cms_duration() )
  47.  // CMS生成までの推定残り時間より短い
  48. //は いっぱいになったら、コレクションを開始します。
  49.  if (!UseCMSInitiatingOccupancyOnly) {
  50.  （統計（）が有効（）の場合）{
  51.  （統計（）.cms_startまでの時間（） == 0.0）の場合）{
  52. 戻る 真実;
  53.  }
  54.  }それ以外{
  55.  //やや早めに保守的に収集したい 注文 
  56.  //試してみて  CMS/プロモーション統計を「ブートストラップ」します。
  57.  // このブランチは最初のCMSが成功した後は実行されません
  58. // コレクションを無効にしてください。統計が有効になるはずです。
  59.  _cmsGen->occupancy() >= _bootstrap_occupancy の場合 {
  60.  if (Verbose && PrintGCDetails) {
  61.  gclog_or_tty->print_cr(
  62.  「CMSCollector: ブートストラップ統計を収集します:」  
  63.  " 占有率 = %f、ブート占有率 = %f" 、_cmsGen->occupancy()、
  64.  _bootstrap_occupancy);
  65.  }
  66. 戻る 真実;
  67.  }
  68.  }
  69.  }
  70.  // 3番目のトリガー状況
  71. // それ以外の場合は、収集サイクルを開始します。
  72.  // 古い世代では、収集サイクルを開始する必要があります。それぞれが使用できる
  73. //この決定を行うための適切な基準。
  74.  // XXX genの拡張が
  75. // 基準はこれとよく一致します。 XXXこれを修正する必要があります
  76. _cmsGen->should_concurrent_collect() の場合 {
  77.  if (Verbose && PrintGCDetails) {
  78.  gclog_or_tty->print_cr( "CMS 古い世代が開始されました" );
  79.  }
  80. 戻る 真実;
  81.  }
  82.  // 4番目のトリガー状況
  83. // 増分コレクションが失敗する可能性があると判断した場合はコレクションを開始します。
  84.  // これは 実際にはあまり生産的ではないだろう。
  85.  // とにかく遅い。
  86.  GenCollectedHeap* gch = GenCollectedHeap::heap();
  87. アサート(gch->collector_policy()->is_two_generation_policy()、
  88.  「以下の内容が正しいかどうか確認することをお勧めします」 );
  89.  if (gch->incremental_collection_will_fail( true /* consult_young */)) {
  90.  if (Verbose && PrintGCDetails) {
  91.  gclog_or_tty->print( "CMSCollector: 増分コレクションが失敗するため、収集してください " );
  92.  }
  93. 戻る 真実;
  94.  }
  95.  // 5番目のトリガー状況
  96. （MetaspaceGC::should_concurrent_collect()）の場合{
  97.  if (Verbose && PrintGCDetails) {
  98.  gclog_or_tty->print( "CMSCollector: メタデータ割り当てのために収集します " );
  99.  }
  100. 戻る 真実;
  101.  }
  102. 戻る 間違い;
  103.  }

上記のコードから、バックグラウンド コレクターには 5 つのトリガー状況があることがわかります。

1. 並列フルGCですか?

つまり、GC の原因が gclocker で GCLockerInvokesConcurrent パラメータが設定されている場合、または GC の原因が javalangsystemgc (つまり、System.gc() 呼び出し) で ExplicitGCInvokesConcurrent パラメータが設定されている場合、バックグラウンド コレクターが 1 回トリガーされます。

2. 統計データに基づく動的計算 (UseCMSInitiatingOccupancyOnly が構成されていない場合のみ) UseCMSInitiatingOccupancyOnly が構成されていない場合、CMS GC が必要かどうかは統計データに基づいて動的に決定されます。

判断ロジックは、予測された CMS GC が完了するのに必要な時間が、古い世代がいっぱいになるまでにかかる推定時間よりも長い場合に、GC が実行されるというものです。これらの判断は、過去の CMS GC 統計指標に基づいて行う必要があります。ただし、最初の CMS GC では、統計データはまだ形成されておらず、無効です。このとき、Old Gen の使用率によって GC を実行するかどうかが決定されます。

  1.  if (!UseCMSInitiatingOccupancyOnly) {
  2.  （統計（）が有効（）の場合）{
  3.  （統計（）.cms_startまでの時間（） == 0.0）の場合）{
  4. 戻る 真実;
  5.  }
  6.  }それ以外{
  7.  //やや早めに保守的に収集したい 注文 
  8.  //試してみて  CMS/プロモーション統計を「ブートストラップ」します。
  9.  // このブランチは最初のCMSが成功した後は実行されません
  10. // コレクションを無効にしてください。統計が有効になるはずです。
  11.  _cmsGen->occupancy() >= _bootstrap_occupancy の場合 {
  12.  if (Verbose && PrintGCDetails) {
  13.  gclog_or_tty->print_cr(
  14.  「CMSCollector: ブートストラップ統計を収集します:」  
  15.  " 占有率 = %f、ブート占有率 = %f" 、_cmsGen->occupancy()、
  16.  _bootstrap_occupancy);
  17.  }
  18. 戻る 真実;
  19.  }
  20.  }
  21.  }

リサイクルは何パーセントから始まりますか? (つまり、bootstrapoccupancy の値はいくらでしょうか?) 答えは 50% です。おそらくあなたも同じようなケースに遭遇したことがあるでしょう。 UseCMSInitiatingOccupancyOnly が構成されていない場合、古い世代が 50% を占めたときに CMS GC が実行されていることがわかりました。その時、あなたは混乱したかもしれません。

  1.  _bootstrap_occupancy = (( double )CMSBootstrapOccupancy)/( double )100;
  2.  //パラメータのデフォルト値
  3. 製品(uintx, CMSBootstrapOccupancy, 50,
  4.  「ブートストラップ収集統計の CMS 収集を開始する CMS 生成占有率」 )

3. 老将の状況から判断する

  1. bool ConcurrentMarkSweepGeneration::should_concurrent_collect() 定数 {
  2. ロックをアサートする
  3. 占有率() > 開始占有率() の場合 {
  4.  if (PrintGCDetails && Verbose) {
  5.  gclog_or_tty->print( " %s: 占有率 %f / %f のため収集 " ,
  6.  short_name()、occupancy()、initiating_occupancy());
  7.  }
  8. 戻る 真実;
  9.  }
  10.  if (CMSInitiatingOccupancyOnly を使用する) {
  11. 戻る 間違い;
  12.  }
  13.  （expansion_cause() == CMSExpansionCause::_satisfy_allocation）の場合{
  14.  if (PrintGCDetails && Verbose) {
  15.  gclog_or_tty->print( " %s: 割り当てのために拡張されたため収集します " ,
  16. ショートネーム());
  17.  }
  18. 戻る 真実;
  19.  }
  20.  _cmsSpace->should_concurrent_collect() の場合 {
  21.  if (PrintGCDetails && Verbose) {
  22.  gclog_or_tty->print( " %s: cmsSpace の指示に従って収集します " ,
  23. ショートネーム());
  24.  }
  25. 戻る 真実;
  26.  }
  27. 戻る 間違い;
  28.  }

ソース コードからは、2 つの主なカテゴリがわかります。(a) Old Gen のスペース使用率がしきい値と比較されます。しきい値より大きい場合、CMS GC が実行されます (つまり、「occupancy() > initiatingoccupancy()」)。占有率は間違いなく Old Gen スペースの現在の使用率ですが、占有率の開始とは何でしょうか?

  1.  _cmsGen ->init_initiating_occupancy(CMSInitiatingOccupancyFraction、CMSTriggerRatio);
  2.  ...
  3.  void ConcurrentMarkSweepGeneration::init_initiating_occupancy(intx io, uintx tr) {
  4.  assert(io <= 100 && tr <= 100, "引数を確認してください" );
  5.  io >= 0 の場合
  6. _initiating_occupancy = ( double )io / 100.0;
  7.  }それ以外{
  8.  _initiating_occupancy = ((100 - MinHeapFreeRatio) +
  9.  ( double )(tr *MinHeapFreeRatio) / 100.0)
  10.  / 100.0;
  11.  }
  12.  }

CMSInitiatingOccupancyFraction パラメータの設定値が 0 より大きい場合は、「io / 100.0」であることがわかります。

CMSInitiatingOccupancyFraction パラメータ構成値が 0 未満の場合 (デフォルトは -1 であることに注意してください)、値は "((100 - MinHeapFreeRatio) + (double)(tr * MinHeapFreeRatio) / 100.0) / 100.0" になります。これは何ですか？ 92％です。具体的な計算過程についてはここでは掲載しません。おそらく、CMSInitiatingOccupancyFraction が構成されていない場合は 92 であると、何らかの書籍やブログで学んだことがあるでしょう。しかし、実際には、CMSInitiatingOccupancyFraction が構成されていない場合は -1 であるため、しきい値は後者の 92% であり、CMSInitiatingOccupancyFraction の値が 92 であるわけではありません。

(b) 次に、UseCMSInitiatingOccupancyOnlyが設定されていない場合

ここには 2 つのサブカテゴリがあります。

  • オブジェクトの割り当てにより Old Gen が拡張され、スペースが正常に割り当てられると、CMS GC が考慮されます。
  • CMS Gen アイドル チェーンから判断すると、これは少し複雑で、まだ解明されていません。幸いなことに、デフォルトの構成によれば、ここでは実際には false が返されるため、このトリガー条件をデフォルトで考慮する必要はありません。

4. 増分GCが失敗するかどうかに基づく（悲観的な戦略）

それはどういう意味ですか？ 2世代GCシステムでは、主に若いGCが失敗するかどうかを指します。 Young GC が失敗したか失敗する可能性がある場合、JVM は CMS GC が必要であると判断する。

  1. ブール増分コレクションが失敗する(ブールconsult_young) {
  2.  // 2世代システムを想定しています。最初の分離項は、
  3.  // 増分コレクションは失敗しました。 ( 2 番目の論理和)
  4.  // そうならないだろう。
  5. アサート(ヒープ()->コレクターポリシー()->2世代ポリシー()、
  6.  「次の定義はn(>2)世代システムには適さない可能性があります」 );
  7.  incremental_collection_failed()を返します||
  8.  (consult_young && !get_gen(0)->collection_attempt_is_safe());
  9.  }

2つの判定条件「incrementalcollectionfailed()」と「!getgen(0)->collectionattemptissafe()」を見てみましょう。ここでのincrementalcollectionfailed()はYoung GCが失敗したことを意味します。失敗する理由としては、通常、Old Gen に昇格したオブジェクトを収容するのに十分なスペースがないことが挙げられます。

!getgen(0)->collectionattemptissafe() は、新しい世代の昇格が安全かどうかを参照します。現在の Old Gen の残りのスペースが Young GC によって昇格されたオブジェクトのサイズを収容するのに十分であるかどうかを判断します。 Young GC がどの程度昇格するかを事前に知ることは不可能であるため、ここでは、各 Young GC 昇格の平均サイズと、現在の Young GC が昇格する可能性のある最大サイズを比較します。

  1.  //av_promo は各 YoungGC プロモーションの平均サイズ、max_promotion_in_bytes は現在可能な最大プロモーション サイズ (eden +現在使用されているスペースのサイズ)です。
  2.  bool res = (利用可能 >= av_promo) || (利用可能 >= max_promotion_in_bytes);

5. メタ空間の状況に基づいて判断する

ここでは、メタスペースが拡張される前に CMSClassUnloadingEnabled パラメータが構成されている場合に設定される、メタスペースの shouldconcurrent_collect フラグを主に確認します。この場合、CMS GC が実行されます。そのため、アプリケーションの起動直後に CMS GC が実行され、Old Gen 領域がわずかな割合を占めるという状況がよく発生し、非常に困惑することになります。実はこれが理由です。

要約する

この記事では、CMS GC のフォアグラウンド コレクターとバックグラウンド コレクターのトリガー条件を整理します。フォアグラウンド コレクターのトリガー条件は比較的単純ですが、バックグラウンド コレクターのトリガー条件はより多く、5 つの主要な状況に分けることができます。それぞれの大きな状況には、いくつかの小さなトリガー分岐もあります。特に、UseCMSInitiatingOccupancyOnly パラメータが構成されていない場合は、トリガーの可能性がさらに多くなります。一般的に、CMS GC が確実に実行されるように、実稼働環境で UseCMSInitiatingOccupancyOnly パラメータを構成することを強くお勧めします。また、GC の原因をトラブルシューティングするのにも便利です。

<<:  AWSはアマゾンから分離される可能性、CEOは合意に従うと語る

>>:  Microsoft Azure SQL Database Managed Instance は、SQL Server から PaaS サービスへのシームレスな移行の時代を切り開きます。

推薦する

friendhosting: 新年のフラッシュセール、全10データセンターのVPSが50%オフ、最低$16/年、トラフィック無制限

friendhosting は新年の VPS フラッシュセールを開始しました。すべての VPS には...

売上ゼロから月間売上120万元を超えるまでにどうやって成長したのか？

運営開始から1年半の天猫店舗として、4月の売上高は120万元を超え、昨年のダブル11の月よりわずかに...

0から1へ：モバイルインターネット広告の基礎知識

昨年末より広告を担当しています。長く携わっているわけではないのですが、会社の広告は基本的にゼロからの...

hudsonvalleyhost-50USD/E3-1240V3/8GB RAM/1TB HDD/5IP/10TB フロー

colorcrossing傘下のブランドであるhudsonvalleyhost.comは、特別なサー...

クラウド マネージド サービス プロバイダーが企業のイノベーションを推進する 5 つの方法

今日、ますます多くの企業が IT 資産をパブリック クラウドに移行しています。これはなぜでしょうか?...

お茶のパッケージ業界でコンテンツ ページを最適化する方法を簡単に分析します。

コンテンツ ページの最適化に関しては、ほとんどのウェブマスターの友人がその重要性を理解していると思い...

Alibaba Cloud、コア製品の完全なサーバーレス化を発表

11月3日、2022年雲奇カンファレンスで、アリババクラウドインテリジェンスの張建鋒社長は、新しいク...

虎の骨を描くのは難しいが、皮膚を描くのは難しい。ハオ兄弟の狂気

最近、「Crazy Webmasters」を再び読みました。私が最も興味を持ったのは、本のウェブサイ...

ポリシー・アズ・コードとは何ですか?オープンポリシーエージェントの紹介

クラウドネイティブ時代においては、「セキュリティがなければ何もない」という言葉をよく耳にしますが、こ...

ウェブサイトのコンテンツエクスペリエンスを最適化するための 4 つのヒント!

現在、SEOを行う際、ウェブサイトの外部最適化がどれだけ優れていても、高品質のコンテンツエクスペリエ...

OpenTelemetry Operator を使用して観測可能なデータを SigNoz に送信する

OpenTelemetry Operator は、OpenTelemetry コンポーネントをデプロ...

現代の企業が企業の俊敏性を向上させる必要がある理由

1990 年代初頭、「現代のビジネス プラクティス」という用語は、一般的に「リアルタイム」配信システ...

ダブル11の最初の戦い：なぜウェイヤは負けたのか？

10月20日、ダブルイレブンの先行販売初日に、タオバオはクラッシュした。それはおそらくヴィヤと李嘉奇...

Kubernetes には LTS がありますか?

興味深い質問は、多くの人が懸念している Kubernetes LTS の問題につながります。興味深い...

#クリスマス# greengeeks - 30% オフ/無制限の cpanel ホスティング/無料登録 com/support SS

クリスマスが近づいており、有名なホスティングブランドのgreengeeksもクリスマスプロモーション...