Tencent Cloud、データ損失で1100万元の訴訟を起こされる！真実が明らかになる

最近、テンセントクラウドの顧客である北京青波CNCテクノロジー株式会社が所有する「Frontier CNC」プラットフォームのオペレーティングシステムクラウドディスクに障害が発生し、ファイルシステムのメタデータが破損しました。

テンセントは総額13万6469元の「賠償+補償」の解決策を提案したが、Frontier CNCは1101万6000元を主張し、テンセントは高すぎると考え、両者は合意に達することができなかった。

現在、Tencent Cloudは、顧客である「Frontier CNC」のデータの完全性が損なわれた件に関する技術レビューを公開した。同社は、顧客の業務への影響について心からお詫びするとともに、障害の根本原因や対策についても詳しく説明した。

Tencent Cloud は、このインシデントを調査した結果、障害の原因は、サイレント ディスク エラーによって発生した単一コピー データ エラーと、データ移行プロセス中の 2 つの異常な操作が組み合わさって、クラウド ディスクの 3 コピー セキュリティ メカニズムに障害が発生し、最終的に顧客データの整合性が損なわれたことを突き止めました。

その日の午前 11 時 57 分、Tencent Cloud の運用および保守担当者は、倉庫 I のスペース使用率が高いという警告を受け取り、移転と拡張を開始する準備をしました。

14:05 に、運用保守担当者が倉庫 I からクラウド ディスクのバッチを選択し、新しい倉庫 II に移動しました。移行を高速化するために、移行プロセス中にデータ検証を手動でオフにしました。

20:27、移設完了後、運用保守担当者がお客様のクラウドディスクアクセスをWarehouse IIに切り替えました。同時に、スペースを解放するために、ウェアハウス I のソース データのリサイクル操作を開始しました。

20:30 に、監視により、Warehouse II の一部のクラウド ディスクに IO 異常があることが判明しました。

テンセントは、データ移行プロセス中の違法操作は主に次の2点に関係していると述べた。

***通常のデータ移行プロセスでは、データ検証はデフォルトで有効になっています。有効にすると、ソース側でデータの異常を効果的に検出して回避し、移行されたデータの正確性を確保できます。しかし、移行作業をスピードアップするために、運用保守担当者がデータ検証を違法に無効にしました。

2 つ目は、通常のデータ移行が完了した後、異常な移行が発生した場合のデータ回復のために、ソース ウェアハウス データを 24 時間保持する必要があることです。しかし、倉庫の利用率をできるだけ早く下げるために、運用保守担当者はソース倉庫からデータを不正に回収しました。

これらの誤った操作による継続的な影響により、顧客のデータの整合性が損なわれ、顧客の通常の業務運営に影響が出ました。 Tencent Cloudは改めて心からお詫び申し上げます。

改善策として、Tencent Cloudは次の2点を提案しました。

まず、すべてのデータプロセスを包括的に見直し、データセキュリティに関わる閉ループプロセスを自動化し、日常的な運用と保守の自動化とプロセスベースの性質をさらに強化し、手動介入を減らし、プロセス全体のデータセキュリティ検証を、閉じられないシステムの常時オープン機能にします。

次に、物理ハードディスク上のサイレント データ エラーについては、現在のユーザー アクセス パスのデータ検証と自己修復に基づいて、プライマリ データ ブロックとレプリカ データ ブロックの検査を優先したり、ユーザーが最近アクセスした正しいデータ ブロックをスキップしたりするなどの方法で、既存の検査メカニズムを最適化して、このようなエラーの検出を高速化し、データ修復を実行します。

さらに、 Tencent Cloud では、ユーザーが無料のスナップショット機能を有効にして、重要なデータを定期的にバックアップすることを推奨しています。

テンセントクラウドは、請求と補償の問題に関するさらなる進捗状況をまだ明らかにしていない。

[[239276]]