InnoDB buffer pool dumpで遊ぶ

掲題のMySQL5.6の新機能で遊んでみたメモ。

InnoDBバッファプールの内容をファイルに書き出しておくことが出来る機能が追加された。

書き出すタイミングは正常終了時(SET GLOBALまたはmy.cnfでinnodb_buffer_pool_dump_at_shutdown = 1を設定)または
任意のタイミングで即時書き出し(SET GLOBAL innodb_buffer_pool_dump_now = 1;)

読み出すタイミングは起動時(my.cnfにinnodb_buffer_pool_load_at_startup = 1)または
任意のタイミングで即時読み込み(SET GLOBAL innodb_buffer_pool_load_now = 1;)

これで、mysqldを再起動してバッファプールが空っぽになっても
素早くウォームアップできるぞ、ということらしい。



特に何も考えずに5.6をインストールして、テーブルにデータを入れ込む。
リブートしてからテーブルの中身をバッファプールに載せておく。

mysql> SELECT * FROM t1;
10000000 rows in set (1 min 24.12 sec)


mysql> SELECT * FROM t1;
10000000 rows in set (37.42 sec)


mysql> SELECT * FROM t1;
10000000 rows in set (22.63 sec)

mysql> SHOW ENGINE INNODB STATUS\G
..

----------------------
BUFFER POOL AND MEMORY
----------------------
Total memory allocated 2747269120; in additional pool allocated 0
Dictionary memory allocated 47230
Buffer pool size   163832
Free buffers       70768
Database pages     85688
Old database pages 31466
Modified db pages  0
Pending reads 0
Pending writes: LRU 0, flush list 0 single page 0
Pages made young 0, not young 0
0.00 youngs/s, 0.00 non-youngs/s
Pages read 147, created 85541, written 117235
0.00 reads/s, 0.00 creates/s, 0.00 writes/s
No buffer pool page gets since the last printout
Pages read ahead 0.00/s, evicted without access 0.00/s, Random read ahead 0.00/s
LRU len: 85688, unzip_LRU len: 0
I/O sum[0]:cur[0], unzip sum[0]:cur[0]
..

そういえばバッファプールインスタンスの数も増えたんだっけなぁと出力結果を見て思い出したり。
取り敢えず吐かせてみようそうしよう。



mysql> SET GLOBAL innodb_buffer_pool_dump_now = 1;
Query OK, 0 rows affected (0.07 sec)

$ ls -lh /var/lib/mysql/ib*

-rw-rw---- 1 mysql mysql 649K  8月 31 16:43 2012 /var/lib/mysql/ib_buffer_pool
-rw-rw---- 1 mysql mysql  16M  8月 31 16:25 2012 /var/lib/mysql/ib_logfile0
-rw-rw---- 1 mysql mysql  16M  8月 31 16:25 2012 /var/lib/mysql/ib_logfile1
-rw-rw---- 1 mysql mysql 394M  8月 31 16:25 2012 /var/lib/mysql/ibdata1

おー、吐いてる吐いてる。

しかし…649K？ 小さすぎる気がしてならない。。
innodb_buffer_pool_sizeは2560Mで、Database pagesが85688(=1.3GBちょい)なのに。。

というかなんか平文で読めるんだけどこのib_buffer_pool。。

$ head /var/lib/mysql/ib_buffer_pool

0,7
0,1
0,3
0,2
0,4
0,11
0,5
0,6
0,45
0,46

謎。すごい謎。

取り敢えず気を取り直してmysqldを再起動。

mysql> SET GLOBAL innodb_buffer_pool_load_now = 1;
Query OK, 0 rows affected (0.00 sec)



エラーログに↓のエントリがぴょっこり出た。
流石に一瞬じゃ終わらないのね。

my.cnfにinnodb_buffer_pool_load_at_startup = 1でも同じログが出る。
ただしロードが終わる前にReady for connectionsは出て接続も出来るのでOK。


120831 17:52:11 InnoDB: Loading buffer pool(s) from .//ib_buffer_pool
120831 17:53:21 InnoDB: Buffer pool(s) load completed at 120831 17:53:20





mysql> SHOW ENGINE INNODB STATUS\G
..
----------------------


BUFFER POOL AND MEMORY
----------------------
Total memory allocated 2747269120; in additional pool allocated 0
Dictionary memory allocated 59613
Buffer pool size   163840
Free buffers       78123
Database pages     85717
Old database pages 31797
Modified db pages  0
Pending reads 0
Pending writes: LRU 0, flush list 0 single page 0
Pages made young 0, not young 0
0.00 youngs/s, 0.00 non-youngs/s
Pages read 85717, created 0, written 1
0.00 reads/s, 0.00 creates/s, 0.00 writes/s
No buffer pool page gets since the last printout
Pages read ahead 0.00/s, evicted without access 0.00/s, Random read ahead 0.00/s
LRU len: 85717, unzip_LRU len: 0
I/O sum[0]:cur[0], unzip sum[0]:cur[0]

..

数値的にはちゃんと（？）戻ってる。

肝心のウォームアップ具合はというと。


mysql> SELECT * FROM t1;
10000000 rows in set (31.89 sec)


mysql> SELECT * FROM t1;
10000000 rows in set (20.66 sec)



mysql> SELECT * FROM t1;
10000000 rows in set (22.40 sec)



利いてる利いてる。

ファイルサイズとファイル構造が謎なので気が向いたら調べよう。。



【2012/08/31 23:42追記】
ib_buffer_poolの右側カラムがPrimary Keyそのものなんじゃないかと勝手に思ってたんですが、
Primary Keyそのものではありませんでした(´･ω･｀)

夕方書いたやつはPrimary Keyがint型だったので区別が付かなかったのですが、
varchar型で日本語入れても出てきたのは数字の羅列。

あと、strace取りながらinnodb_buffer_pool_load_nowさせたところ、
*.ibdファイルをopenしてpread64やってるのが確認できました。
さすがSH2さん大当たりです。。


【2012/09/01 00:16追記】
ib_buffer_poolの書式は、<tablespace id>,<page no>\n でした。