第4のキャリアになる前に試練みたいなことが起こりますねぇ…。
1: サーバル ★ 2019/11/26(火) 21:03:20.86
無停電機能を外したまま電源設備を更新、楽天などに影響した九電系データセンター障害の原因判明
2019/11/26 14:55
2019/11/26 14:55
九州電力の通信子会社QTnet（福岡市）のデータセンターで障害が発生した問題について、2019年11月26日に停電の原因が判明した。11月23日朝、電源設備の更新作業中に通常時の電源が遮断したことで予備電源に切り替わったが、電源の切り替え時に作動する無停電機能を外して作業していた。その結果、7秒間ほど電源が停止し、利用各社のシステム障害につながった。
まだ22社が復旧できていない
[画像タップで拡大表示]
今回の障害で、事業継続を安定させる目的で使うはずのデータセンターに、想定外の盲点があると明らかになった格好だ。QTnetによると、影響を受けた約260の企業・自治体の中で、2019年11月26日10時時点で22社が復旧できていないという。
今回の障害の影響で、クレジットカードの楽天カードやスマホQR決済の楽天ペイが11月23日朝に利用できなくなった。楽天ペイは11月25日朝に一時的に使えなくなったり、楽天カードは現在も一部機能が利用できなかったりと、発生から3日経過後も電源停止の影響が残っている。
4: 名無しさん＠１周年 2019/11/26(火) 21:04:28.62
>>1
賠償金大変だこれ
賠償金大変だこれ
296: 名無しさん＠１周年 2019/11/26(火) 21:40:09.39
>>4
想定し得ないミスでは無くて防ぐことが出来るミス
ついでに言えば確認するべき事をし忘れたと言う事で、会社としてかなりの賠償をする羽目になるな
それとやっちまった本人が首括らない様に周りは気をつけてやんなきゃな
想定し得ないミスでは無くて防ぐことが出来るミス
ついでに言えば確認するべき事をし忘れたと言う事で、会社としてかなりの賠償をする羽目になるな
それとやっちまった本人が首括らない様に周りは気をつけてやんなきゃな
229: 名無しさん＠１周年 2019/11/26(火) 21:31:50.72
>>1
バカすぎ
何のためのUPSか
バカすぎ
何のためのUPSか
5: 名無しさん＠１周年 2019/11/26(火) 21:04:43.10
結局人なんだよなあ
36: 名無しさん＠１周年 2019/11/26(火) 21:09:10.29
>>5
つつもたせ的な何かと読んでしまった
つつもたせ的な何かと読んでしまった
9: 名無しさん＠１周年 2019/11/26(火) 21:05:31.43
馬鹿じゃねーのというところだけど、なぜこんな馬鹿なミスが起きたのか、だな。信じられんミスだけど。
賠償は10億じゃ済まんのじゃないか？
賠償は10億じゃ済まんのじゃないか？
17: 名無しさん＠１周年 2019/11/26(火) 21:06:38.88
これって現場では予見できない事なのか？
担当者が特に無能だったわけではなく、システムの盲点で相当に気付きにくいものなの？
担当者が特に無能だったわけではなく、システムの盲点で相当に気付きにくいものなの？
賠償金発生するんかな？
22: 名無しさん＠１周年 2019/11/26(火) 21:07:27.60
>>17
災害じゃなく誤ってシャットダウン⇒システム障害
災害じゃなく誤ってシャットダウン⇒システム障害
賠償だろ
32: 名無しさん＠１周年 2019/11/26(火) 21:08:52.75
だめじゃん
分かっていても分かっていなくても
繋がっている機器を外していいわけねーだろ
34: 名無しさん＠１周年 2019/11/26(火) 21:09:05.23
これって
データセンタ全体の電源が停止
で
楽天のサーバーはUPSがなかったから
即死
ってこと？
データセンタ全体の電源が停止
で
楽天のサーバーはUPSがなかったから
即死
ってこと？
39: 名無しさん＠１周年 2019/11/26(火) 21:10:01.27
>>34
作業するのに間違えてUPS外したんじゃねーかな、データセンターだから楽天は被害者
作業するのに間違えてUPS外したんじゃねーかな、データセンターだから楽天は被害者
316: 名無しさん＠１周年 2019/11/26(火) 21:42:07.68
>>39
このデータセンターが死んだのに対する被害者かもしれないが、
この程度で死ぬようなデータセンター冗長取ってなかったのは楽天の責任
このデータセンターが死んだのに対する被害者かもしれないが、
この程度で死ぬようなデータセンター冗長取ってなかったのは楽天の責任
35: 名無しさん＠１周年 2019/11/26(火) 21:09:09.15
熊襲はまともな仕事しろ
49: 名無しさん＠１周年 2019/11/26(火) 21:11:21.76
195: 名無しさん＠１周年 2019/11/26(火) 21:28:06.56
>>49
ｗｗｗ
ｗｗｗ
51: 名無しさん＠１周年 2019/11/26(火) 21:11:39.23
ヤフージャパン子会社の
サーバーデータをバックアップごと消しちゃいましたﾃﾍｯ
っての思い出すな
サーバーデータをバックアップごと消しちゃいましたﾃﾍｯ
っての思い出すな
52: 名無しさん＠１周年 2019/11/26(火) 21:11:47.82
さすがにもう使えるかなと思って、久しぶりに通販で払おうとしたら決済できんかった。
カードにハサミ入れようかな。 頭にきた。
カードにハサミ入れようかな。 頭にきた。
55: 名無しさん＠１周年 2019/11/26(火) 21:12:45.41
楽天のモバイル環境開発手詰まり状態でハード資源とかもそこら中からかき集めてるって話だから
単純にミスってわけでじゃないよ
単純にミスってわけでじゃないよ
71: 名無しさん＠１周年 2019/11/26(火) 21:14:43.08
>>55
外部のデータセンターの設備交換なんて関係ないだろ
外部のデータセンターの設備交換なんて関係ないだろ
80: 名無しさん＠１周年 2019/11/26(火) 21:15:29.45
>>55
おまえは何を言ってるんだ？
おまえは何を言ってるんだ？
57: 名無しさん＠１周年 2019/11/26(火) 21:12:55.63
受けるｗｗｗ
大事な設備なのに金払わないで適当な業者にやらせたのかな
大事な設備なのに金払わないで適当な業者にやらせたのかな
59: 名無しさん＠１周年 2019/11/26(火) 21:13:13.36
60: 名無しさん＠１周年 2019/11/26(火) 21:13:15.47
なんだこれ楽天じゃなくて、その設備を更新していたQTネットとか言うところのチョンボですやん。
しかも九電の子会社って。おまえら電気のプロやないんか！
しかも九電の子会社って。おまえら電気のプロやないんか！
119: 名無しさん＠１周年 2019/11/26(火) 21:19:45.29
>>60
設備屋顎で使ってるだけで、自分たちの手を動かすわけじゃないし
管理なんてそれこそやったことないし
設備屋顎で使ってるだけで、自分たちの手を動かすわけじゃないし
管理なんてそれこそやったことないし
61: 名無しさん＠１周年 2019/11/26(火) 21:13:16.34
報告書は英語で提出ですか？
62: 名無しさん＠１周年 2019/11/26(火) 21:13:20.66
Googleみたいにサーバーごとに直接UPS接続してればこんなことにはならなかった
78: 名無しさん＠１周年 2019/11/26(火) 21:15:22.72
UPSはあるよ
４年経ったからバッテリー買い替えたら配線繋がってない事に気付いたとか
４年経ったからバッテリー買い替えたら配線繋がってない事に気付いたとか
79: 名無しさん＠１周年 2019/11/26(火) 21:15:26.53
データセンターにもゆとり
81: 名無しさん＠１周年 2019/11/26(火) 21:15:47.36
昨日昼使おうとしたのに
83: 名無しさん＠１周年 2019/11/26(火) 21:15:54.77
楽天の株価を下げるためにわざとやったとかw
95: 名無しさん＠１周年 2019/11/26(火) 21:17:38.15
こんなんだからAmazonやMSのクラウドがシェアとるんだよ
116: 名無しさん＠１周年 2019/11/26(火) 21:19:30.40
>>95
世界1位か2位のＩＴ先進大国と、いまだに1800年代の機械アセンブリーで生計
たててる技術力50位未満の国と比較するなよｗ
世界1位か2位のＩＴ先進大国と、いまだに1800年代の機械アセンブリーで生計
たててる技術力50位未満の国と比較するなよｗ
96: 名無しさん＠１周年 2019/11/26(火) 21:17:39.65
お前ら純真無垢かよｗ世間向けの発表鵜呑みにしやがって
とある筋からの確からしい情報によると、これは掃除のおばちゃんがコードにつまづいたことが原因らしい
ガチで！
145: 名無しさん＠１周年 2019/11/26(火) 21:22:33.60
>>122
東武のとある半蔵門線直通車両が長いこと休んでたのは
マジで掃除のおばちゃんがモップをマスコンにぶつけたことで
車両を暴走させ床下電装機器を損傷させたから
東武のとある半蔵門線直通車両が長いこと休んでたのは
マジで掃除のおばちゃんがモップをマスコンにぶつけたことで
車両を暴走させ床下電装機器を損傷させたから
125: 名無しさん＠１周年 2019/11/26(火) 21:20:08.90
想定外の盲点wwww
132: 名無しさん＠１周年 2019/11/26(火) 21:21:36.57
掃除のおばさんレベルだわ
133: 名無しさん＠１周年 2019/11/26(火) 21:21:37.07
バカじゃん
素人レベルだわ
素人レベルだわ
で、作業員は何歳だったの？
ゆとり？
バブル？
147: 名無しさん＠１周年 2019/11/26(火) 21:22:53.56
ゆとり世代が主力だからな
ヒューマンエラーだらけが日常の社会よ
ヒューマンエラーだらけが日常の社会よ
165: 名無しさん＠１周年 2019/11/26(火) 21:24:16.17
>>147
ゆとりってほんとバブル世代の再来だよな～
ミスが低レベルで、しかも多い
ゆとりってほんとバブル世代の再来だよな～
ミスが低レベルで、しかも多い
192: 名無しさん＠１周年 2019/11/26(火) 21:27:45.73
>>165
ゆとり云々の前に、作業管理者が仕事サボリすぎでしょ
ヒューマンエラーはやった人が悪いのではなく、
ヒューマンエラーがある前提で、エラー起こしても問題なくリカバリーできる
体制と手順を作る／作らせるのが管理者の仕事
ゆとり云々の前に、作業管理者が仕事サボリすぎでしょ
ヒューマンエラーはやった人が悪いのではなく、
ヒューマンエラーがある前提で、エラー起こしても問題なくリカバリーできる
体制と手順を作る／作らせるのが管理者の仕事
221: 名無しさん＠１周年 2019/11/26(火) 21:31:09.52
>>192
エキスパートが長時間かけて立派なマニュアルを作ってド素人がそれを見ながら作業して失敗するまでが様式美
エキスパートが長時間かけて立派なマニュアルを作ってド素人がそれを見ながら作業して失敗するまでが様式美
156: 名無しさん＠１周年 2019/11/26(火) 21:23:21.79
外部業者だからソフバンの回し者だな
157: 名無しさん＠１周年 2019/11/26(火) 21:23:26.81
楽天は自社でデータセンター運用しろ
161: 名無しさん＠１周年 2019/11/26(火) 21:23:51.60
ケチって鯖一箇所だけしてるのが悪い
バックアップ体制は無し
携帯もそうなるんだろうなあ
バックアップ体制は無し
携帯もそうなるんだろうなあ
162: 名無しさん＠１周年 2019/11/26(火) 21:23:57.43
あー絶対落ちてはいけないものが落ちたら
責任者の首で済まないわ
責任者の首で済まないわ
南無阿弥陀仏
163: 名無しさん＠１周年 2019/11/26(火) 21:24:06.38
うちのビル、非常電源設備の点検交換作業でミスって
ビル丸ごとドカンと落としちまったことあるわ
こういうのって本来止めてやるべきなんだけど
今はサーバーを止められない時代になってるから
無茶な手順で綱渡り作業しちゃうんだよなあ
ビル丸ごとドカンと落としちまったことあるわ
こういうのって本来止めてやるべきなんだけど
今はサーバーを止められない時代になってるから
無茶な手順で綱渡り作業しちゃうんだよなあ
164: 名無しさん＠１周年 2019/11/26(火) 21:24:07.26
あるあるwww
167: 名無しさん＠１周年 2019/11/26(火) 21:24:56.07
お詫びポイントくれよ
168: 名無しさん＠１周年 2019/11/26(火) 21:24:56.66
データセンターのバイトのおばちゃんが抜いちゃったのか
169: 名無しさん＠１周年 2019/11/26(火) 21:24:57.31
サーバーの予備サーバーが必要だな！
171: 巫山戯為奴 ◆TYUDOUPoWE 2019/11/26(火) 21:25:07.32
コイツらネット世代でなくバブル末期のヤンキーだし。
174: 名無しさん＠１周年 2019/11/26(火) 21:25:33.45
楽天が悪くなかろうがQTネットが悪かろうが
こっちには知ったこっちゃないわ
こっちには知ったこっちゃないわ
カード楽天しか持ってないのに連休大変やったわ
ふざけんな
201: 名無しさん＠１周年 2019/11/26(火) 21:28:45.67
楽天カード明日引き落としなのですが！！
210: 名無しさん＠１周年 2019/11/26(火) 21:30:00.27
>>201
それは確認出来るから落とされるだろう
来月以降だよ
それは確認出来るから落とされるだろう
来月以降だよ
リボとか使ってる貧民は楽しみなんじゃねw
225: 名無しさん＠１周年 2019/11/26(火) 21:31:20.55
>>210
30万分飛んでくれてたらキャンペーンしなくていいや
30万分飛んでくれてたらキャンペーンしなくていいや
205: 名無しさん＠１周年 2019/11/26(火) 21:29:25.29
ようするに
電源落ちたときはどうなる？
すぐに予備に切り替わります
ならいいか
で、やっちゃったんだろ
電源落ちたときはどうなる？
すぐに予備に切り替わります
ならいいか
で、やっちゃったんだろ
208: 名無しさん＠１周年 2019/11/26(火) 21:29:50.60
マルチリージョン？とかじゃないのか
金融関係なのにシステム脆すぎじゃないか？
7秒電源落ちたら3日システム落ちっぱなしってのも...
金融関係なのにシステム脆すぎじゃないか？
7秒電源落ちたら3日システム落ちっぱなしってのも...
211: 名無しさん＠１周年 2019/11/26(火) 21:30:20.80
素人かよ、ペイやめろ
212: 名無しさん＠１周年 2019/11/26(火) 21:30:21.85
楽天カード
作ったらすぐこれだわ
もう辞めたい
作ったらすぐこれだわ
もう辞めたい
作り直したいわ
213: 名無しさん＠１周年 2019/11/26(火) 21:30:23.46
数秒停電したくらいで、今も復旧できない影響が残ってるのが一番ダメでしょ。
その原因はいまだに誰もわかってないんだろうけど
その原因はいまだに誰もわかってないんだろうけど
214: 名無しさん＠１周年 2019/11/26(火) 21:30:35.02
データセンターの作業員って派遣の場合が多いから仕方ないな
224: 名無しさん＠１周年 2019/11/26(火) 21:31:18.13
言ってもGoogleもAmazonもこの手の障害起こしてるから人間が作業してる限りなくならんだろうな
283: 名無しさん＠１周年 2019/11/26(火) 21:38:52.87
ゆうちょPayで良かったわぁ
284: 名無しさん＠１周年 2019/11/26(火) 21:38:53.52
楽天カード使えるけど明細確認できないって
未確定データの復旧がやばいのかな
未確定データの復旧がやばいのかな
292: 名無しさん＠１周年 2019/11/26(火) 21:39:56.54
>>284
今月分チャラにしてくれたら許すぞ
今月分チャラにしてくれたら許すぞ
288: 名無しさん＠１周年 2019/11/26(火) 21:39:31.33
掃除のおばちゃんが電源コード引っ掛けたネタをマジでやんな
290: 名無しさん＠１周年 2019/11/26(火) 21:39:42.94
データセンターの一箇所死んだだけで使えなくなることが証明されたワケだ
三木谷ペイ
三木谷ペイ
308: 名無しさん＠１周年 2019/11/26(火) 21:41:20.49
社内でwhy？what happen？とか飛び交ってたのかなw
日本で
日本で
309: 名無しさん＠１周年 2019/11/26(火) 21:41:21.67
これは大問題だ
今月のカード利用金額は楽天が補償してくれよ
今月のカード利用金額は楽天が補償してくれよ
通販はコチラ(Amazon/楽天/ヤフーショッピング）
