人工知能
ドローンが4日間でYandexのデータセンター3拠点を止めた。3つあるクラウドゾーンのうち2つも道連れになった
Yandexは、日曜未明のドローン攻撃でウラジーミルのデータセンターが完全に停止したと発表した。4日間で稼働不能になった3つ目の拠点である。Yandex Cloudの3つのアベイラビリティゾーンのうち2つが利用不能となり、プラットフォームは緊急運用に移行。同社は顧客に対し、Yandex外に用意した復旧計画へ切り替えるよう求めた。
MAI
Yandexは日曜朝、顧客に対して、Yandex以外の場所に用意した災害復旧手段へ切り替えるよう告げた。同社自身のクラウド稼働状況ページに掲載されたこの案内は、4日間のドローン攻撃がロシア最大のテクノロジー企業に何をもたらしたかを最も端的に示している。クラウド基盤は、その内側にあるものが動き続けることを、もはや約束できなくなった。
直接のきっかけは、10月11日未明、ウラジーミル市郊外エネルゲティク地区にあるYandexのデータセンターへの攻撃だった。Yandexは設備が損傷し、同拠点の稼働が「完全に停止した」と述べた。負傷者はいない。ロイターは、これを数日のうちに稼働不能となった3つ目の主要なYandexデータセンターだと報じた。
4日間で3拠点
| 日付 | 拠点 | 報じられた影響 |
|---|---|---|
| 10月8日 | リャザン州サソヴォ — Yandex最大のデータセンター | 大規模な火災の後、全面停止。同社のAIモデル開発に使われる3台のスーパーコンピューターのうち2台がここに設置されている |
| 10月9日 | カルーガ州 | 一部が稼働不能に。Yandexは複数のハードウェアモジュールが停止したと認めた |
| 10月11日 | ウラジーミル市エネルゲティク地区 | 完全停止。同拠点は約50MW、最大2,880ラックを収容する設計 |
ロイターは、サソヴォとカルーガへの攻撃をウクライナのドローンによるものとしている。ウラジーミルについてYandexは「ドローン攻撃」としか述べていない。最初の報道は、同社が停止を認める前にTelegramチャンネルのASTRAとCrimean Windから出たもので、ウクライナの関与は公式には確認されていない。ロシア国防省は一晩で16の地域にわたり479機のドローンを迎撃したと主張しているが、この種の主張の多くと同様、検証されていない。
Yandexは5つの大規模データセンターを運用しており、そのうち3つが被害を受けたことになる。同社は自社の地図サービスからロシア国内4地域のデータセンターの位置情報を削除し、株価は週の前半にモスクワ取引所で約4%下落した。
プラットフォームは緊急運用に入った
クラウド側の経過は丁寧に読む価値がある。エンジニアリング上の教訓がそこにあるからだ。モスクワ時間午前4時ごろ、Yandex Cloudの1つのゾーンで電源障害が記録された。その直後、3つあるアベイラビリティゾーンのうち2つ — ru-central1-a と ru-central1-b — が利用不能になり、Yandex Cloudは同社が緊急運用と呼ぶ状態に移行した。同社は残るリソース構成を不安定だと説明し、サポート窓口に連絡がつかない可能性と稼働状況ページの更新が遅れていることを告知した上で、外部拠点にある代替の復旧計画を使うよう顧客に勧めた。
80を超えるYandex Cloudのサービスが影響を受けた。対象はコンピュート、ネットワーク、ストレージ、PostgreSQLやClickHouseを含むマネージドデータベース、Managed Kubernetes、開発者向け・業務向けツール、そしてAIレイヤー — YandexGPT API、SpeechKit、Vision OCRなど — に及ぶ。消費者向けでは音声アシスタントのAlice、Yandex Music、Telemost、Yandex Smart Homeが停止した。Kyiv Postの報道によれば、二次的な影響は銀行アプリ、配車プラットフォーム、小売のMagnitとFix Priceにも及んだ。
マルチゾーン冗長性は、誰も問うていない問いに答えている
アベイラビリティゾーンは、建物1つ分の障害 — 変圧器、冷却系、光ファイバーの断線、火災 — を吸収するために存在する。その設計は、障害が互いに独立していることを前提にしている。拠点のリストを順に潰していくドローン攻撃は、その前提を正面から破壊する。相関が技術的なものではなく、地理的かつ政治的なものだからだ。一国の内側に数百キロ離して置かれたゾーンは、ハードウェアについては独立しているが、射程内にあるという点では完全に依存している。
ウラジーミルの攻撃は、二次的な経路も示した。同州のアレクサンドル・アヴデーエフ知事は、攻撃で変電所が損傷し、約5,000人の住民が停電したと述べた。暖房、水道、電力の約8割は日曜朝までに復旧した。データセンターは、計算を止めるために破壊される必要はない。電力網を失えば足りる。そして電力網は、建物よりも柔らかく、はるかに大きな標的である。
学習用の計算資源はフェイルオーバーしない
推論用の容量は、原理的には別の場所に作り直せる。複製されており、一部は状態を持たず、十分な資金があれば置き換えられる。学習クラスターはそうではない。密結合したハードウェアを一度だけ、一つのホールに組み上げたものであり、そのインターコネクトは短距離でしか機能しない。ロイターによれば、YandexがAIモデルの開発に使う3台のスーパーコンピューターのうち2台はサソヴォにあった — 10月8日に最初に攻撃された拠点である。これにアベイラビリティゾーンは存在しない。それらの機械が学習していたものは、建物が止まった時点で止まった。
これは、業界自身の語彙が覆い隠しているAIインフラの側面だ。能力は、重みと研究チームに宿るもののように語られる。実際には、それは数えられるほどの建物に宿っており、その数はほとんどの人が思っているより少ない。
勘定は双方向に走る。ロシアの攻撃もウクライナの施設を停止させてきた。Omega Telecomのキーウのデータセンターは攻撃後に稼働を停止し、同市のdline.uaのデータセンターは破壊された。教訓はどちらの能力の話でもない。計算資源が、ごく普通の意味でのインフラになったということだ — 物理的で、動かせず、地図に載り、電力の引き込みを持つ資産であり、したがって標的である。クラウド事業者の耐障害性に関する文書はすべて、ハードウェア故障を想定して書かれている。この事態を想定して書かれたものは、一つもない。
Sources: Reuters, via Central Oregon Daily · The Moscow Times · RBC Ukraine · Kyiv Post · iXBT, citing status.yandex.cloud · Ukrainska Pravda