この記事はWeChatの公開アカウント「Dotnet Plus」から転載したものです。以下のQRコードからフォローできます。この記事を転載する場合はDotnet Plus公式アカウントまでご連絡ください。 1. 不条理 過去 1 ~ 2 か月間、本番環境の K8s クラスターでは、短期間の 503 Service Temporarily Unavailable が頻繁に発生しており、積極的に再現することはできません。これはかなり憂鬱でストレスがたまります。 HTTP 5xx 応答ステータス コードは、サーバー側のエラーを定義するために使用されます。
2. トラブルシューティング記録
k8s クラスター ノードに入ると、確かに一部のノードのクロック調整サービスが開始されておらず、北京時間よりも 2 ~ 3 分遅れていることが時々わかります。これは確かに、時間差によって Impala 接続認証が失敗する原因を説明できます。
3. 思考と推論 障害サイトで Impala 接続の問題が発生するたびに、Impala 接続の問題によって Web アプリケーション サービスがオフラインになる理由がわかりません。 当社のウェブアプリには、toB と toC の両方のビジネスがあります。このサイトは mongodb に大きく依存しており、impala への依存度は低いです。impala が接続できない場合でも、それをチェックできないだけで、サイトの SSO + 注文関連の書き込み操作は引き続き利用できるはずです。 数日前に見たk8sプローブを思い出すと、準備プローブがImpalaを検出したようです。
準備プローブが Impala の検出に 3 回失敗すると、Pod は Unready としてマークされ、Pod は webapp サービス ロード バランサーから削除されてトラフィックを分散しなくなり、nginx に実用的なバックエンド サービスがなくなり、サイト 503 になる可能性が高くなります。 すぐにベータ環境を見つけ、Impala を切断して仮説を検証します。 4. 問題のレビュー バグ修正は私が推測したものではなく、純粋に経験に基づいて推測されたものです。はっきりとした推理のアイディアはありませんが、誰もが落とし穴に足を踏み入れる早期警告とみなすことができます。 Docker のヘルスチェックは検出のみ可能ですが、Kubernetes の生存プローブと準備プローブには検出機能だけでなく意思決定機能もあります。 ここで、k8s 準備状況検出戦略に問題があります。 webapp の impala への弱い依存関係に問題があることが検出された場合、webapp サービス全体がオフラインになります。強い依存関係のみを検出する必要があります。強い依存関係の問題は、コンテナの準備ができていないことを示しており、これは準備状況プローブの本来の目的でもあります。 |
<<: シングルテナント SaaS アーキテクチャとマルチテナント SaaS アーキテクチャの違いは何ですか?
>>: 【純乾物】5G?エッジコンピューティング?またまた大げさな「コンセプトの誇大宣伝」?
月収10万元の起業の夢を実現するミニプログラム起業支援プラン第25回中国国際広告祭が「氷の都」ハルビ...
未読メールの中に「さようなら、Orkut」というメールがありました。内容は、Google がソーシャ...
Kubernetes を実践する過程で、ギャップを埋める経験を積んできました。簡単に要約して皆さんと...
タイムトラベルドラマ「宮」と「一歩ずつ驚愕」を鑑賞し、原作ソフト「ディマオ」について語るニューメディ...
IoT デバイスを開発している場合、重要な問題を解決するために何らかの貴重な計算を実行することが必...
世界有数の情報技術調査およびアドバイザリ企業であるガートナーは、世界のパブリッククラウドサービス市場...
「独身の日」はもともと若者が楽しむための民間の祭りだったが、今では天猫と淘宝網を主戦場とする「双十一...
本日、新疆サッカー協会のリーダーシップ交代とスマート青少年トレーニング開始会議において、SAP は新...
最新の映画サイトを立ち上げてからまだ 2 か月も経っていませんが、最適化のテクニックと経験を皆さんと...
人として、自分の欠点を発見し、間違いを正せるよう、自分自身を振り返ることを学ばなければなりません。 ...
新浪科技ニュース:北京時間4月27日早朝のニュースで、米国第2位の共同購入サイトLivingSoci...
[[360428]]ウォーターフォール方式からアジャイル配信、そして DevOps まで、ソフトウェ...
この記事は、「Seller Digital Edition」編集長の招待を受けて、Taobaoストア...
ネットワークと統合からフェイルオーバー、資産管理、セキュリティまで、エッジ テクノロジーへの適切なサ...
locvps は、ダブル 11 に以下のプロモーションを提供しています: (1) 香港将軍澳データセ...