2020-12-03

pt-online-schema-changeを用いたスキーマ変更 on Amazon Aurora MySQL

SRE AWS Database

こんにちわ。id:cw-tomitaです。
この記事は、Chatwork Advent Calendar 2020 - Qiita の3日目の記事です。

早速ですが、皆さんはauto incrementなRDBのtableのidにはどのような型を利用されていますか？ Chatworkでは多くのテーブルでint型が指定されているのですが、９年前にサービスを開始した時には想像もつかないくらいに多くのお客様に使っていただけるサービスへと成長した結果、int型なauto incrementのidを利用しているテーブルで、レコード数がintの上限を迎えそうなテーブルが複数現れ、どかっとまとめてALTER TABLEを実施するという2020年を代表する一大イベント(?)がありました。

今回は、その時に利用したpt-online-schema-changeというツールを使ってのALTER TABLEの実施に関して、記事を書きたいと思います。

tl;dr
pt-online-schema-change とは？
このツールにたどり着いた理由
- 理由その１：Auroraをbinlog_format =off で運用するようになり、計３回の停止メンテナンスが必要
- 理由その２：binlogでのレプリケーションのAuroraのバグを踏んだ
gh-ostとの比較
Chatworkでの実行例
- step1. データ同期の開始 (オンライン)
- step2. テーブルがっちゃんこ〜逆向きトリガーの作成 (停止メンテナンス中)
- step3. 逆向きtriggerの削除 & 旧テーブルの削除 (オンライン)
- おまけ. 本番実行時に発生した問題
  - step1のコマンド実行後、--critical-load に引っかかってデータ同期が停止
  - triggerの作成タイミングで処理が詰まった
まとめ

2020-12-02

DynamoDB用クライアントの制限を考慮したAkka Streamsの実装を作る

Scala Akka

どもー、かとじゅん(@j5ik2o)です。

Scala Advent Calendar 2020 - Qiitaの2日目の記事です。今回の記事は掲題のとおり、DynamoDBのI/OをAkka Streamsで効率的に実装してみようというネタです。

2020-12-02

検証中の新しいアーキテクチャをご紹介します！！

Scala DDD Advent Calendar Akka Reactive

この記事は Chatwork Advent Calendar 2020 2日目の記事です。
前日はプロダクトマネージャー宮下の「SaaS エンジニアのキャリアパスとしてのプロダクトマネージャー」でした。

全国のエンジニアの皆さん、こんにちは。
コアテクノロジー開発部 Scalaエンジニアの辻（ @crossroad0201 ）です。

2020年5月にChatworkに入社して気がつけばはや半年... Creator's Note には初投稿となります！！

この記事では、私も参加しているChatworkのアーキテクチャ刷新プロジェクトで現在検討している内容についてご紹介したいと思います。

なぜ今、アーキテクチャを刷新するのか
検討している主要技術
- モジュラモノリスとマイクロサービスアーキテクチャ
- リアクティブシステム
- ドメイン駆動設計
- イベントソーシング+CQRS
これからの取り組み
まとめ

なお、ここでご紹介する内容はまだ検討、設計、プロトタイピング、テスト、検証...を繰り返している段階ですので、まだ実際のプロダクトで採用されているわけではないことをご了承ください。

2020-11-30

Migrating our PHP Legend System from EC2 to Kubernetes, Part 4: Application Migration Tactics Matched to Kubernetes Cluster Update Strategy

AWS SRE kubernetes English

Hello! I’m cw-ozaki, and I work in the SRE department.

Continuing on from part three, I’d like to consider how to migrate applications to new clusters in line with the Kubernetes cluster update strategy in this installment.

creators-note.chatwork.com