Makio Tsukamoto Profile picture
Feb 19, 2021 10 tweets 5 min read Read on X
いま「aws 障害」で検索するといっぱい呟かれてて status.aws.amazon.com 見にいく知識ないawsエンジニアじゃないっぽい人たちほど「複数ソシャゲ落ちてる、さてはAWS」と言い切ってて、外形監視として優秀すぎる。 #aws の中の方およびミッションクリティカル系で使ってる方々がんばって…。
シングルリージョン障害?
「AWS障害らしいです」「AWSはAmazon Web Serviceの略らしいです」
みたいなスレッドしてる人観測してAWSがなにか分からなくてもAWS障害を検知・アラートしてる外形監視ほんと優秀だと思った。
結局、単一AZ障害なのか。その割に影響範囲が広かった気がするのだけど、本当にEC2とEBSだけだったのかな?
itmedia.co.jp/news/spv/2102/…
やっぱりこう考えますよね。2019年の大規模障害も、最初はシングルAZでのEC2の障害でしかないはずだった。実はELBとかにも波及してて、マルチAZでも落ちたサービスが少なくなかった。だった気が。
#aws #aws障害
いろんなツイートが出てるけど、個人的な感想としてはやっぱりリージョン障害対策は(少なくとも要否検討は)必須ということで、今年予定の大阪リージョンの昇格を早よぅ…AWS Backupでコピー先シンガポールとか指定するたびムズムズするんです…っ。
#aws #aws障害
あれ、見落としてた。やっぱりELB(ロードバランサ)にも波及してましたね。でも日本時間2:00~2:18だけ?あとこれ今朝見たっけ?となってるのだけど、いつ出たんだろう。今朝7時最終更新のClassmethodさんの記事でも言及されてないし。
status.aws.amazon.com/#AP_block
classmethod.jp/news/info_2021… Image
メモ。2月20日、気象庁ホームページは0:55頃障害発生(第1報)、バックアップサイトに切り替える(第2報)も一部コンテンツは動作せず(第3報)、10:50頃完全復旧(第4報)。
jma.go.jp/jma/press/2102…
jma.go.jp/jma/press/2102…
jma.go.jp/jma/press/2102…
jma.go.jp/jma/press/2102…
メモ。Coincheckは2月19日23:37、23:06頃からの障害により臨時メンテナンス、20日0:25に原因AWS障害、8:41順次サービス再開、11:24完全復旧を報告。



「EC2が縮退しているのに、アラートが上がってこない」「AZが死んでいるにも関わらず、サービスとしてはまだ『生きている』判定がされており、切り離しがうまくいってないような動作をしていた」
これ、症状自体が2019年の障害に似てる気が。 #AWS障害
t-cyrill.hatenablog.jp/entry/2021/02/…

• • •

Missing some Tweet in this thread? You can try to force a refresh
 

Keep Current with Makio Tsukamoto

Makio Tsukamoto Profile picture

Stay in touch and get notified when new unrolls are available from this author!

Read all threads

This Thread may be Removed Anytime!

PDF

Twitter may remove this content at anytime! Save it as PDF for later use!

Try unrolling a thread yourself!

how to unroll video
  1. Follow @ThreadReaderApp to mention us!

  2. From a Twitter thread mention us with a keyword "unroll"
@threadreaderapp unroll

Practice here first or read more on our help page!

More from @tsukamoto

Jul 15, 2023
私論かつ試論だけど。
クラウドネイティブがクラウドインフラに最適なアーキテクチャだと信じてアプリケーションを作る人が少なからずいて、スモールスタート(Pay as you go)でサービスインするつもりだったのが意外なコスト高に潰れがちな現象。
クラウドネイティブは、わりとドットコムバブルとかWeb2.0の頃に巨大SaaSに必要な(a)ポータビリティ(アジリティにもつながる)と(b)スケーラビリティを求めて、コンテナエコシステムの高度化で作られてきた。
最初からそれなりのクラスタを組みがちで、コントロールプレーンが厚く、データプレーンも最低台数をしっかり持ちがち。固定費が大きく、ある意味Pay as you goではなく、イニシャルコストと撤退コストが大きい。
Read 8 tweets
Jun 10, 2023
予約してた「人が増えても速くならない ~変化を抱擁せよ~」がKindleに配信されてきたので、読む読む。
amzn.asia/d/19603eQ
#人が増えても速くならない
「システムは使い始めてから改善が始まる」
「仕組みはシステムが支えるので、事業の改善を続けていくなら、当然ながらシステムもずっと改修していく前提で作った方がいい」
#人が増えても速くならない 第1章
「ソフトウェアは精緻なジェンガみたいなものだと思ってください。雑に乗っけてしまうほどに、あとから乗せるのが難しくなり、いずれ崩壊してしまいます」
#人が増えても速くならない 第1章
Read 32 tweets
Jun 24, 2021
今朝も #ohayo_aws を聴くところから…といいつつ、今日は #jawsug_asa で1.5時間前に始まってましたが。
カーテン開けて窓から光入れて、おはよー。
twitter.com/i/spaces/1ZkJz…
AWS Managed Services (AMS)がAWS管理リージョン横断のセルフサービス運用レポートを提供。
aws.amazon.com/about-aws/what…
#ohayo_aws
AWS Outpostsが大阪リージョンをサポート。
aws.amazon.com/about-aws/what…
AWSアプライアンス的なのをオンプレミスにおいて超低レイテンシ需要にこたえるOutpostsが、大阪リージョン管理下にできるように。
#ohayo_aws
Read 11 tweets
Jun 23, 2021
ラジオ体操から聴講中。
#jawsug_asa
「アップセットね、デーブ」覚えた!
#jawsug_asa
chimeチャットに投稿したけど、日本語の語順とボット設計の相性問題。
alexaとかsiri慣れしてくると、利用者側も「ヘイsiri、ホテルを予約」みたいな順番で話しかけるように訓練されますね。意外と日本語を聞く側のボットより話す側の人間が変わっていくかも?

#jawsug_asa
Read 11 tweets
Jun 23, 2021
今朝も #ohayo_aws を聴くところから。
カーテン開けて窓から光入れて、おはよー。
twitter.com/i/spaces/1zqKV…
AWS Fargate を使って AWS CodeCommit リポジトリのリージョン間レプリケーションを行う | Amazon Web Services ブログ。
aws.amazon.com/jp/blogs/news/…
#ohayo_aws
今月のAWS Architecture Monthlyが5G特集。
aws.amazon.com/jp/architectur…
#ohayo_aws
Read 6 tweets
Jun 22, 2021
今朝も #ohayo_aws を聴くところから。
カーテン開けて窓から光入れて、おはよー。
twitter.com/i/spaces/1dRKZ…
AWS Elemental MediaLiveが画像ベースの字幕をモバイル再生に適した文字ベースのキャプションに変換可能に。
aws.amazon.com/about-aws/what…
映像(画面)に入っている字幕をOCRによりVTTキャプションに変換。サマリ作成とか翻訳とかも自動化しやすくなりそう。
developer.mozilla.org/ja/docs/Web/AP…
#ohayo_aws
そもそも「小さい画面で字幕映画見ると字幕潰れて読めない」とか「ホゲホゲ語の映像で英語字幕出てるけど日本語で出してくれないかな」とかいうときに、文字列変換してくれると何とかしようが出てくるはないじゃないのかな…。
#ohayo_aws
Read 9 tweets

Did Thread Reader help you today?

Support us! We are indie developers!


This site is made by just two indie developers on a laptop doing marketing, support and development! Read more about the story.

Become a Premium Member ($3/month or $30/year) and get exclusive features!

Become Premium

Don't want to be a Premium member but still want to support us?

Make a small donation by buying us coffee ($5) or help with server cost ($10)

Donate via Paypal

Or Donate anonymously using crypto!

Ethereum

0xfe58350B80634f60Fa6Dc149a72b4DFbc17D341E copy

Bitcoin

3ATGMxNzCUFzxpMCHL5sWSt4DVtS8UqXpi copy

Thank you for your support!

Follow Us!

:(