メッセージキュー とは？

同期的なAPI呼び出しだと、受信側が止まっていたらエラーになるし、受信側が遅いと送信側も待たされるよね。メッセージキューなら送信側はキューに入れた時点で次の仕事に進めて、受信側は自分のペースで取り出して処理できるんだ。お店で注文票を貼っておき、厨房が順に作るイメージだよ。

例えば、動画や画像のアップロードはすぐ受け付けて、変換のような重い処理は裏で順に行う場面だね。たくさんの処理を複数のワーカーに振り分けたり、データベースへの書き込みをまとめて後で処理したりするのにも使われるよ。

AWSのメッセージキューサービスだよ。標準キューは非常に高いスループットに対応する代わりに、順序は「できるだけ」で保証されず、同じメッセージが2回以上届くこともある。FIFOキューはメッセージグループごとに送った順に届き、重複を防ぐ仕組みもあるんだ。FIFOキューはバッチ処理なしだとAPIごとに秒間300回までなどの上限があるよ（高スループットモードなどで引き上げ可能）。

困らないように、受信側の処理を「冪等」（同じメッセージを何回処理しても結果が変わらない）にしておくのが大事だよ。AWSも、標準キューでは重複する可能性に備えて冪等な処理にするよう勧めているんだ。

SQSでは「デッドレターキュー（DLQ）」を設定しておくと、決めた受信回数（maxReceiveCount）を超えても処理できなかったメッセージをDLQへ移せるよ。移したメッセージは原因を調べたあと、元のキューに戻す（redrive）こともできる。ただメッセージには保存期間があるから、DLQの保存期間は元のキューより長くしておくのがおすすめだよ。