スーパーコンピュータシステムのファイル消失のお詫び | お知らせ | 京都大学情報環境機構
記事によると
2021年12月14日 17時32分 から 2021年12月16日 12時43分にかけて,スーパーコンピュータシステムのストレージをバックアップするプログラム(日本ヒューレット・パッカード合同会社製)の不具合により,スーパーコンピュータシステムの大容量ストレージ(/LARGE0) の一部データを意図せず削除する事故が発生しました.
皆さまに大変なご迷惑をおかけすることになり,深くお詫び申し上げます.
ファイル消失の影響範囲
・対象ファイルシステム:/LARGE0
・ファイル削除期間:2021年12月14日 17時32分 ～ 2021年12月16日 12時43分
・消失対象ファイル:2021年12月3日 17時32分以降,更新がなかったファイル
・消失ファイル容量:約 77TB
・消失ファイル数:約 3400万ファイル
・影響グループ数:14グループ (うち,4グループはバックアップによる復元不可)
障害情報:【スパコン】ストレージのデータ消失について
http://www.iimc.kyoto-u.ac.jp/ja/whatsnew/trouble/detail/211216056978.html
ファイル消失の原因
スーパーコンピュータシステムの納入会社である日本ヒューレット・パッカード合同会社によるバックアッププログラムの機能改修において,不用意なプログラムの修正とその適用手順に問題があったことで,本来は不要になった過去のバックアップログファイルを削除する処理が,/LARGE0 ディレクトリ配下のファイル群を削除してしまう処理として誤動作しました.
日本ヒューレット・パッカード合同会社から提出された報告書を掲載します.
>途中から修正したシェルスクリプトの再読み込みが発生し、結果的に未定義の変数を含むfindコマンドが実行されてしまいました。https://t.co/25rxjWiXOR
— jun (@nahcnuj) December 28, 2021
おそろしや…
だ、大事件ですやんけ……。
— マルマ因 (@Zinsei_Syuuryou) December 28, 2021
（京都大学にて約77TBが過失により消失したとのこと。）
僕が担当者だったら、うんこ全部出して気絶しとるわ！
そのあと無断で退職して失踪、最寄りのサービスエリアで号泣しとるわ！ https://t.co/6GTu40vWQJ pic.twitter.com/Xaf4RfkKvX
日本HPが京大のスパコンのデータを約77TB消失してしまったらしい。そのうち約28TBは復元不能…。
— ﾎﾟﾃｲﾄ (@potato9841) December 28, 2021
お知らせ内にある日本HPから出された報告書には『弊社100%の責任』『補償はご意向に沿うようにする』と絶望しかない文章が並んでる…。https://t.co/3DW162H8t5 pic.twitter.com/7NFA4iAj2G
以下、全文を読む
この記事への反応
・卒論、修論前のこの時期にこの知らせは辛い。。
該当者がいないといいけれど。
・これは洒落にならない一大事ですね…
・「弊社100％の責任」と書いてある障害報告書はじめて見た。
担当者は激詰めされてそう。
スパコンだと汎用ソフトもなく、
手製スクリプトでバックアップなんかねえ。
ていうかミラーリングだけのパックアップはアカン
・ bashの挙動の認識不足によるものなのか。
それにしても77TBも消失っていうのが怖い。。。
自分だったら発覚した時に心臓止まる
・アドベントカレンダーの駆け込みにしては
大型すぎる案件きたな。
データ量もやらかし内容も登場キャラクター全てがでかい
・HPの報告書には
「変数名を視認性・可読性を高めるために変更しましたが」
とリファクタリングが原因だと書いてあってつらすぎる。
・担当者、身を投げなきゃいいけど……
あわわわわ……
これは京大史に残るやらかしなのでは…
これは京大史に残るやらかしなのでは…
シミリ自由
シミリ権利
シミリ義務
シミリ譲歩
シミリ固執
シミリ自由の星
シミリ権利の星
シミリ義務の星
シミリ譲歩の星
シミリ固執の星
作業者に罪は無いだろ
最終的にはその手順書に許可出した奴が悪い
まだ会社にいるんだけどさっさと消えればいいのに
セキュリティが低い割にクリティカルな動作するからな
いずれヒューマンエラーで大問題起こす元凶みたいなもんだな
いくら何でも別系統のバックアップとっとけよ！
難しいけど例えるのなら大規模な戦争が起きて各地で大きな被害
うちサイド単位のコロニーの2か所が完全に消し飛んだ感じ
残り5か所は何とか復旧できそう
まさか完全消去してるわけじゃあるまいに
「ただの不要ファイル削除コマンドやから雑でええやろ！」ぽちー
↓
実行環境の他のスクリプトとの副作用で削除先フォルダが未定義になり、なんか大量に削除された「あああああああ！」
この文言えげつないな…
全部いったれ！ってなるのか…
うちのオカンは仕送りをＦＡＸで送ろうとした錬金術師や。あとは短縮押さないで110番に送った新人とかいた。それに比べれば多少は進化してるわw
ありがとー
「指定日以前の更新されてないデータを全て見つけ出し、削除しろ」という命令として実行されたっぽいな
Windowsとはちゃうからな・・・
スパコンのファイルシステムってそこまでセクタ読みとか通用するんか？
が、がんばってもう一度作り直そうな
そもそも削除処理を入れる必要が無いだろ。
10日前よりも古いファイル全消しとは・・・
スパコンもデータが無ければただの箱だぜ。
どうせめくら判だよ…
やらかしたのはHPやぞ
意図的に消すように仕組まれたんじゃねこれ？
日本撤退もありえる。
明らかに意図的にやられてるやろ
だっけ？って疑問風に言っていても訴えられたら普通に名誉毀損になるの分かっている？
なら質問自体駄目なのか！？みたいな屁理屈言わないでね
ありがちすぎる。
実際んとこ質問もだめなのか？
一度発表してればセーフなのか？
責任は私が取る！
削除動作を伴うスクリプトはちゃんと事前テストしないと怖いわ
もともと潰れかけてたやん
せめて記事の内容くらい読めよ
取ってなかったらもう大学解体ものだわ
一番確実だな(´･ω･`)
未定義変数が原因で、間違った配置先ディレクトリを渡してしまってドカンと消してしまった、と。
普通、ログファイルは定型のファイル名にして、削除時にはファイル名正規表現も抽出条件にいれるよね。
そういう時ってエラー吐かないのかね？
契約で賠償額は最高100万円まで？！
まじすか
日本人とか使いたくないわ
新しいPC買えば良くない？w
バックアップまで全滅なら京大の価値がリセットされるレベル
大手っていうか日本人労働者を使ってるところは全部信用できない
低賃金だから
まともな人はみんな海外に逃げてる
賠償せいや
円盤にも焼いとけよ(´・ω・｀)
スパコンの計算結果
・ファーストサーバデータ全消失事故
2012年（平成24年）6月20日に、クラウドデータのバックアップデータも含めて、全消失する事故を起こした。
2012年（平成24年）6月20日17時頃（JST）に、脆弱性対策を特定のサーバ群に対し実施した。事前にこれらの更新プログラムは、検証環境において動作確認を行ない、問題が発生しないことを確認した後、本番環境で実施することとなった。しかし、この更新プログラムに不具合があり、検証環境下での確認及び防止機能が十分に働かないことと、メンテナンスの時のバックアップの仕様が変更されたことによって、データ消失事故が発生した。
本来であれば、対象サーバだけに適用するプログラムであったが、コンピュータプログラムのバグによって、接続されていた全ての検証環境、本番環境、バックアップ環境に同時に不具合が適用され、データが全て消失した。
ウェブサイト以外にも、サイボウズのグループウェア商品のデータも消失し、多くの企業に影響を与えた。
この消失事故は、社内マニュアルに従わないことによって発生した。筆頭株主であったヤフー株式会社は、損害賠償支払いなどのために、「システム事故関連損失」として、特別損失12億1900万円を経費計上した。
やらかしたのアメリカの企業です、、、
以前ストレージでデータ飛ばしてたなぁ
日本語勉強してこい
ちゃんとした日本企業のスパコン使っとけよ
削除が正常動作しただけだからエラー出る余地ないんだよ
十分な予算があれば一定期間ごとにテープバックアップを残して
たとえサーバーが炎上しても前月分までは復旧可能なんてこともできた
エラー吐くように作ってあれば、ね。
>これは京大史に残るやらかしなのでは…
バイトは知恵遅れ
京大には監督責任はあるかもしれんが、完全にやらかしたのは委託先のキューレットパッカードじゃねーかよ
H社「おまかせください・・・」
ソニーのテープドライブとか使ったらソニータイマー発動して一発でデータ飛びそう
ソニーだけはやめとけ
任天堂公式SSDカードとか使っとけば安心できる
まあどっかの国からの指示やろな、H社はいくらもらったんやろ
やらかしたのは日本人だと思うぞ
日本HPでネイディブはそんないないと思う
さすが京都で１番の任天堂だな
任天堂公式SSDカードってどこで買えるんですか？
お前、Lusterファイルシステムがなんなのか理解してないだろ
はっきり言って復元は無理
俺のPCのお宝動画が77TB分消えたと思うと人生終了レベルの衝撃
スパコンクラスのお宝ファイルなら計り知れない
俺のパソコン120TBあるわ
中身ほとんどエ.ロ動画だけどね
スパコンに勝てそう
rmコマンドなんかechoすれば良いだけじゃん。ド素人かよ。
SDカードの間違い
こんなどうでもいいタイポにめくじら立てるとかこれだからゴキは
当然単体テストはしてたんだろ
適用を運用中にしたからスクリプトの変数がバグって意図しない挙動になった
馬鹿はROMってろ
ネイディブってなに？どこの国の人とか関係ないよ
何人であろうと技術力が十分でない人間に任せたのは会社の責任
子会社の責任は親会社の責任
だからファーストサーバのデータ全損失の賠償だって
ソフトバンクグループがケツもつことになっただろ
ヒューレット・パッカード・エンタープライズの日本法人に過ぎない日本HPのしたことはHPE本社関係ないとか通るわけない
とうとうスカイネットが生まれてしまったか
えｗネタで言ってたんじゃないの？ｗ
SDカードに77TBバックアップとか冗談でもなければ
よほど知恵が遅れてないとそんなこといえないと思うんだが
また集めりゃいいかって、割り切れるでしょ
日本語でおｋ
HPEは企業向けに鯖構築と運用を専門に請け負ってる鯖屋で相場より高い保守費用ぶんどってるはずやで
それがこんな致命的かつ大規模なミス犯したらごめんなさいだけでは済まんわな
HPのアホ担当がゴミ箱使わないでcドライブ全体を消すコマンドプロンプト実行したって話
この程度の理解もできないならパソコン使う資格ねえよ
正月休みでせっつかれることなくおせち食いながら復旧作業できるやんw
最近は結構でかいSDカードあること知らんの？
少しはググれよ知恵遅れゴキ
復旧出来ないって話なのわかってる？
シェルスクリプトのrmミスとかテストしないで運用に入るバカしかミスらない。
ディレクトリ指定ミスとか典型だよ。100%典型のechoテスト程度で見つかる。
日本HPが本体と一緒と思ってるやつ初めて見た
お花畑かよ
まあ、普通こういうのって、バックアップから完全復旧しました程度ならニュースにならんからな。
ニュースになる＝完全消失（一部 or 全て）と思った方が良いよね。
hpだめじゃね？
事前テストしてんの？
気をつけよ
4つだけ個人でデータ残してませんかって聞いてまわればそこそこなんとかなるやろ
誰かが失踪したりしそうなレベルの不祥事
どこかの国に移行されただけかな？
責任取りようがなくね・・・
パソコン使うのに資格なんているの?
てかヲタクイライラで草
大容量の喪失だから、兆単位で請求できるのでは
やらかしたくはないものだ
税金とか入ってるだろうに海外に金流してどうすんだ
お前の方が全然お花畑だよw
HPが何かすら知らんだろw
日本HPと日本HPEの区別もついてないカスがなにいってんのｗｗｗｗ
×京都大学さん
○ヒューレット・パッカードさん
こりゃ残ったデータベースにも何らかの不具合が及んだと考えておかないと危なっかしい
それにしても日本を揺るがす大事件なのに報道が一切ないのは事の重大性を認識してないのか？
日本の最高学府が勝手に壊滅したんだぞ？
信頼性を確認するまではそのまま使うのは怖いな。
この件で京大は何年遅れるのだろうか。
テープでのバックアップは無いのかな。
信用って大事だよ
で、今回のhpがやらかしたことと関係あんの？
低学歴ってもっともレベルの高い大学が最高学府だと思ってるらしいけど最高学府は大学全般を意味する言葉やで
定義上は日本大学も東京純心大学も最高学府
さいこう‐がくふ サイカウ‥【最高学府】
〘名〙 学問を学ぶところとして最も程度の高い所。大学の意に用いる場合が多い。
※社会百面相（1902）〈内田魯庵〉温泉場日記「天下の最高学府ともあるものが情ないぢゃないか」
『日本国語大辞典』
コスパに目が眩んだのか知らんがけしからんね
Apple製品のバグ見つけてサポート連絡したことあるけど、本社のエンジニアが動かなきゃ何も出来ないって言われたぞ
煽りよる
問題は京大の最先端研究が数年分か或いはもっと多くのデータが消えたことだろ
日本の産官学に甚大な影響を及ぼすぞ
まさか京大なんて日本に大した大学じゃないなんて言うなよな？
たった７７個分やーーー
フロッピー７７枚失ってもテヘペロやーーー
日本ヒューレット・パッカードがやらかしたんだろ
100％自分達の責任ですって認めてるんだし
『 もうやめて！ 日本ｈｐのHPはゼロよ！！ 』
間違って消した時の損失を考えたら100TB程度のディスクなんて今どきなら用意できるだろうに
まだこんなリスク負ってファイル消してる奴らがいるのか
PSO2じゃあるまいしｗ
本当に馬鹿多いね
スイッチでも対応してるというのに
完全にやろうとしたら別の場所にいくつか取っておかないとダメなんだよな
こんなデッカイ容量無理やぞ
中国人「日本の遅れた技術とかどうでもいいんだよなあ・・・・」
これがマジだから困る
linux「スクリプト実行中に上書きされちゃったけど、まぁ続けてスクリプト読むわ。削除っと。」
〇〇「うわぁぁぁぁぁぁぁぁぁぁぁぁぁぁ！！！！！」
バックアップしてるけど、前のバックアップから消失のわずかな時間に70テラバイトも新しくできたのか
もしそうなら、失ったのは計算に使った時間と電気代だけみたいなものだが
実を取るアメリカ人らしい。
find . | rm -rf になっちゃたんだろうなぁ…恐ろしい話だ
スパコンで計算させるときに移すデータだから別に元データ自体が消えるかどうかは関係ない
計算するために移してたデータと結果データが消える
なので基本的にはやり直しなだけで元になってる研究資料が消失するわけではない
スパコンで解析させるから元データ送って自分のとこのデータ全削除なんてやるアホはまずいない
言ってる人もいるけど問題はじゃあ再計算すればいいじゃん！となっても全員即できるわけでもないので論文発表が迫ってきてる人には死活問題
77TB分のフロッピーとか気が遠くなるな
研究機関系のデータは盗み放題と散々言われとるやん今更だろ
新人さんか？
典型的な手順ミスだぞこれは
変数定義確認するテストだけだと防げんわ。
といっても、計算し終わった結果ファイルを手元に持ってこずに放置しておく 、そんな研究者も多くはいないだろうから影響は限定的じゃないかな。
大半は消し忘れたファイルとか消えただけだといいね。
障害っていうのはプログラムの中だけにあるわけじゃないんだよね
バックアップも簡単に用意できないぞ。委託先は顧客に無断でそんなことできないし、きっちり同意の上にやろうとすると保守金額が上乗せになる
金掛けずにやるには、顧客である京大側がバックアップ自前で取っておくくらいだな。それできるなら委託しないだろうが
注目されてナンボなんで
テヘペロ(๑>◡<๑)
それともRAID構成変えたとかで物理フォーマットかけるような保守作業もやったのかな？
パソコン使う資格www
久しぶりにこんなガイジ見たわw
ググったらほんとにあったわ...
あと鉄平はバイトの日本語教育したほうがいいぞ
全く理解できてなくて草
そのプログラムちょっと欲しいかも。例え死ぬ前に発動してもWeb上で一回見たらコレクションとして見る事無いからあまり問題ではないし。
と思ってる奴はオレだけではないはず。
様、並びに、貴学のご意向に沿うようにいたします。
上限はあるんだろ？
本社のHPの名に傷もつくので、もうHP日本支社は潰したほうがいい
高速道路の渋滞予報や複雑な大気予測による長期天気予報など専用プログラムの組み方次第で
多岐にテーマが横断するので一部でもデータが消えて計算やり直しとなれば
その分野の数年分の研究が水の泡になった可能性が高い
被害算定は考えたくもない悪夢だな
犯人は中国人留学生です！！
生きて……
責任は下請けに丸投げだろうな
消した直後なら復帰できる機能すらないスーパーコンピュータ様なのか？
一般HDDなら出来るのに
そんな重要なデータならそもそものバックアップの取り方が終わってるじゃん京大
俺はWindows８のときヒュレッドパッカードが無茶苦茶な構成のノート販売しているのに嫌気がさして等の昔に利用しなくなったわ
いまだにヒューレッドバッカードなんて利用しているからそうなるし自業自得だと思う
大切なことだからもう一度言うけどPCのパーツ構成の基礎すらわかってないバッカードになんて頼るな
WIN８のときクソCPUのアトムでWIN8動かそうと無理がある組み合わせのノートPCつかまされたことがあるよ
当時はデザインが良いことに騙されたっけ・・・