ISUCON 13 に参加して20位でした (最終スコア: 91,400 なんかいい感じではやいやつ)
ISUCON 13に参加して20位になりました。
また、Tver賞として Firetv stick 4K max を獲得しました！
ありがとうございます！
参加確定まで
ISUCON 参加はこれで3回目でした。
最初の難関が、申し込みです。
DOS攻撃ばりのアクセスするのは嫌だったので、参加確定券付きの個人スポンサーとして申し込みました。
割とチームメンバーは決まっていて、去年と同じメンバーで参加するかなーと考えていました。(リーダー、セキュリティ・ネットワークマスター、自分)
しかし、セキュリティ・ネットワークマスターが今年は一人で参加してみたい(多分)とのことだったので、新しく一人誘う必要がありました。
現職のCTOをなんとか説得しました。
競技前日まで
- リーダー
- CTO
- 自分
というチームメンバーが確定してからは、10月中旬くらいから4回練習しました。
練習した問題は、 ここら辺
- private ISU
- ISUCON Prior
- ISUCON10 本線
- ISUCON10 予選
- ISUCON11 予選
- ISUCON12 本線
当日
| 時間 | 初期スコア | 最終スコア |
|---|---|---|
| 10時~11時 | 3,816 |
2,224 |
| 11時~12時 | 2,224 |
6,766 |
| 12時~13時 | 6,766 |
7,570 |
| 13時~14時 | 7,570 |
11,218 |
| 14時~15時 | 11,218 |
19,875 |
| 15時~16時 | 19,875 |
31,206 |
| 16時~17時 | 31,206 |
50,472 |
| 17時~18時 | 50,472 |
91,400 |
9時-10時
当日は、9時にみんなで集まりました。
昼は買いに行く時間がないので、10時までに各々が買いに行きました。
YouTube 放送で、ライブが少し遅れた際に、「あれ、これ動画配信サイトの問題か？」と言ったのがまさか当たってしまいました。
- モニターセットアップ
- お昼買い出し
- 作戦会議
- リモートサーバー(開発用)のセットアップ
10時-11時
初期: 3,816
最終: 2,224
10時10分くらいに、サーバーが全部立ち上がりました。
初期ベンチ 3,816点
プロファイラー等をまいたりして、一時的にベンチが下がる (2,224 点)
一旦、powerDNSとか水責め攻撃とかわからん...になっているので、通常通り、indexを貼る,N+1解消を進めていこうになった
この段階では、user周り等のN+1が重そうになっていた
- CloudFormation で、サーバーを立ち上げる
- プロファイラーを撒く (秘伝、netdata等)
-
初期ベンチ(10:09:10:
3,816点) - DB周りを見る -> index貼りましょうになる
- powerDNS ってなんや...になる
11時-12時
初期: 2,224
最終: 6,766
11時の頭に、アプリケーション、当日マニュアルを読む。
index貼り、N+1解消を進めていき、スコアが上がる
tagsが、N+1になっていたので、bulkにする
11:54:18, 6,766 点
- マニュアルの読み合わせ
- インデックス貼り
- tagsのbulk
12時-13時
初期: 6,766
最終: 7,570
tagsは、insert が走っていないので、オンメモリで良さげという話になり実装する
- user icon 周り
- tags のオンメモリ化
- theme のオンメモリ化
13時-14時
初期: 7,570
最終: 11,218
13時くらいになると、themeのオンメモリ化を進めました。
user ごとの dark_theme 等ですが、ほぼほぼ更新がなく、データー数も1000くらいのオーダーでした。
失敗としては、insertがあったのですがここの永続化はすっ飛ばしてはいけなかったです。(後から気づいた)
ここで、ベンチマーカーの不調もありました。
- theme のオンメモリ化
- mysql interpolate の有効化
14時-15時
初期: 11,218
最終: 19,875
次は、そもそもuserがあんまりレコードが少なかったのでオンメモリ化を進めました。
ここは、iconとコンフリクトして、「うーん。なんでfailするんだろ...」となっていて悩んでいました。(結局、コードに問題はなかったがicon hash の永続化周りの問題そうだった)
- user のオンメモリ化
15時-16時
初期: 19,875
最終: 31,206
userのところで悩みつつ、サーバー分割を考え始めました。
また、
- user のオンメモリ化
- db の max_con を変えてみる(app)
- サーバーの分割を考え始める -> (s1: app, s2: mysql, s3: powerdns)
16時-17時
初期: 31,206
最終: 50,472
- サーバーの分割 -> かなりエラーが出て焦る
17時-18時
この時間は、やばいやばいになっていました。
サーバー分割が完了して、点数が安定するようになり安心しました。
まだ、ログを消しきれていない箇所もありましたが、もうやめておこうという判断になりました。
初期: 50,472
最終: 91,400
- サーバーの分割完了
- 再起動時のキャッシュが永続されていないエラーを直す
- ベンチがちゃ
18時以降
セブンにご飯を買いに行って、みんなで生放送を見守りました。
TVer賞が貰えてとても嬉しかったです。
最後に
このチームでできて、とても楽しかったです！
去年は、26位で順位が一桁足りずに本戦を逃したのが悔しかったです。
今年は、20位、去年の挽回ができました。(優勝したかった)
30位以上は、
- スポンサー企業ノベルティ詰め合わせセット
- ISUCON13オリジナルTシャツ
- ネームカード
- 認定証
が貰えるらしいので楽しみ！