最近読んだもの 52 - TCP Syn Queue と Accept Queue の実装、誰のために法は生まれた など
- TCP Socket Listen: A Tale of Two Queues
- Linux の TCP Syn queue と Accept Queue について
- Syn queue は実際には hash + queue len で、また Syn cookie を有効化すると実質上限は無くなる
SYN_RECVがESTABLISHEDになるのはクライアントからの ACK を受け取った順なので、直列のキューである必要はなく、ハッシュでよい (Syn cookie オフの場合)- tcp_max_syn_backlog が上限値 (Syn cookie オフの場合)
- Syn queue の状態を見る直接的な方法は無いが、
sudo netstat -antp | grep SYN_RECVss -n state syn-recv sport :80などで現在の SYN_RECV 件数はわかる netstat -s | grep -i listenでオーバーフローの発生状況がわかる
- Accept queue は
listen(2)の backlog オプションの値と somaxconn の小さい方が上限になるss -ntlのRecv-QSend-Qで状況がわかる- それぞれキューの現状と最大の値
- LISTEN 状態以外のソケットではこれらのカラムの意味が変わるので注意
- コードの解説もあり
- One million queries per second with MySQL
- Vitess による horizontal sharding で高い QPS を実現
- ベンチマーク付き
- How we store and process millions of orders daily
- grab のデータストアの設計
- ワークロードを OLTP と OLAP に分類
- OLTP 用には DynemoDB
- OLAP 用には kafka を用いたパイプラインを構築
- GitHub Availability Report: August 2022 | The GitHub Blog
- 今月の Availability Report
- Vitess | A database clustering system for horizontal scaling of MySQL
- Vitess の Rails 対応状況
- Rails Guide のクエリが問題なく通ることを確認しているらしい
- 誰のために法は生まれた
- (広義の) 組織の都合で個人か犠牲になるケースを防ぐため
- という主張を始め、実力行使は一旦ブロック必要など、興味深いコンセプトが色々登場して面白かった
- また題材となっている古典の作品はかなり面白そうで、読んで・観てみたくなった
- ただ客観的な根拠が無いのに主張が断定的だったり、そもそも論理の展開がよくわからなかったりなど、ひっかかる部分が多く素直には楽しめなかった
- 恐らく学生 (中高生?) 向けの口頭の講義の文字起こしであること、題材の作品を自分が読んでいないことが原因の一部だとは思う
- 同じテーマを扱っている講義録ではない書籍があるならそれも読んでみたい
