実際にはLabs版の5.7.4(InnoDB GIS)から必要になってたらしい。5.7.5のリリースノート を"boost"で引っかけると出てきたり、Building MySQL with Boost | MySQL Server
Blog に書いてあったりした内容を試したっていうだけのメモ。
（ ´-｀）.oO（MySQL Server
Blogには1.55が必要って書いてあるけど、リリースノートにはバージョン特に書いてないなぁ。。cmake/boost.cmakeを見る限り、1.55が決め打ちで必要とされてるぽいけど(1.56ではダメ)
CentOS 6.3の公式リポジトリからyumで突っ込んでみるも、バージョンが1.41なのでやっぱりダメっぽい。
$ cmake .[さらに読む]
..
-- …
MySQL 5.7.5では、*UNDOログ領域が共有テーブルスペース上になければ*
使っていない領域をシュリンクさせることが出来るようになったらしい。
まずはUNDOログ領域を共有テーブルスペース上から追い出す設定。これは5.6で既に使える。共有テーブルスペースを作る *前に*
やっておかないといけないので注意。
$ vim my.cnf
..
innodb-undo-tablespaces= 2
..
とりあえずinnodb-undo-tablespacesを2以上にすればOK。暗黙のデフォルトは0(=共有テーブルスペース上にUNDOテーブルスペースを作る)
…
MySQL 5.7ではmysqlスキーマのテーブルがいくつかMyISAM => InnoDB化されている。
5.6ではInnoDB統計情報永続化のヤーツと{master|relay-log}_info_repositoryのヤーツだけだったのが、
mysql56> SELECT @@version;[さらに読む]
+------------+
| @@version |
+------------+
| 5.6.20-log |
+------------+
1 row in set (0.00 sec)
mysql56> SELECT table_name, engine FROM information_schema.tables WHERE table_schema= 'mysql';
+---------------------------+--------+
| table_name | engine |
+---------------------------+--------+
| columns_priv | MyISAM |
| db | MyISAM |
| event | MyISAM |
| func | MyISAM |
| general_log | CSV |
| help_category | MyISAM |
| help_keyword | MyISAM |
| …
MySQL 5.7.5の新機能ネタ。
いままでMySQLでgraceful shutdownぽいことをしようとすると、SET GLOBAL
max_connections= 1
で接続を制限するくらいしか思いつかなかったけれども(LVSとかでやりくりするのは除く)
* 接続を切断するわけではないので、Connector/Jのコネクションプーリング的なものとかと相性が悪い
* クライアントにはError: 1040 (ER_CON_COUNT_ERROR) "Too many connections"
が戻ってしまう
* しかも、Error:
1040は通常運用でも異常系として発生しうるので、区別してハンドルするのはかなり無理ゲー
と、イマイチgraceful shutdownの夢を見切れなかったけれども。
5.7.5で追加されたオフラインモードが多少なりとも夢を見させてくれるかも知れない。
オフラインモードは
* SET GLOBAL …
MySQL 5.7.5の新機能、オンラインバッファプールサイズ変更について。
今のサイズより大きくする（サイズ拡大編）は別エントリーで。
↑のエントリーにも書いたけど、理屈的には
* バッファプールサイズを今より大きく変更する時には全ブロック
* バッファプールサイズを今より小さく変更する時にはブロックなし
らしい。れつご。
# mysqladmin -r -i 2 ex | grep Innodb_rows_inserted[さらに読む]
..
| Innodb_rows_inserted | 19837 | -- 前のエントリーの続きで、バッファプール80GBでtpcc_startでトラフィックかけてる
| Innodb_rows_inserted | 18892 …
MySQL 5.7.5の新機能。
ログ貼ってたら長くなったので、バッファプールサイズを小さくするのは別エントリーへ。
理屈的には、
- バッファプールを大きくするとき
* innodb_buffer_pool_chunk_size ごとに新しいページを確保しながらゴニョゴニョやる
* この処理中は *バッファプールへの全てのアクセスがブロックされるよ*
- バッファプールを小さくするとき
* …
ほへー。
MariaDB [hoge]> ALTER TABLE t1 DROP c1, DROP c2, DROP c3, DROP c4, DROP c5, DROP c6, DROP c7, DROP c8, DROP c9, DROP c10;
Stage: 1 of 2 'copy to tmp table' 57.5% of stage done
ちなみにMyISAM。InnoDB(XtraDB)は表示されるのかどうか知らん。
（叩いたことあるはずだけど記憶にない）
4.1はどうなんだろう。
もともと何故か、「4.0から上げるならまずは5.0まで上げて、あとはまあラクチン」とか記憶にあったんですが
@yoku0825 なぜそこで5.0で止まる。。。
— R.Kajiyama 旅芸人onミカン箱 (@RKajiyama) 2014, 9月 8
そそのかされるがままに5.5, 5.1を試したらレプリケーションがぶら下がらなかった。
sys-backup19 [(none)]> show slave status\G[さらに読む]
*************************** 1. row ***************************
Slave_IO_State:
Master_Host: xxx.xxx.xxx.xxx
Master_User: xxxxxxx
Master_Port: 3306
Connect_Retry: 60
…
ロード前の.tsvファイルの情報。
$ ls | wc
457 457 13531
$ du -sh .
8.4G .
$ gzip -l *.gz | sort -k 3 -n | head -2
compressed uncompressed ratio uncompressed_name
8828777 65857744 86.6% hogelog.tsv
$ gzip -l *.gz | sort -k 3 -nr | head -2
7788996 179347671 95.7% hogelog.tsv
7507164 173335810 95.7% hogelog.tsv
$ gzip -l *.gz | awk '{compressed += $1; uncompressed += $2}END{printf("%d\t%d\n", compressed, uncompressed)}'
17863413934 237716864426
非圧縮で200GB、平均すると圧縮率は92.5%…って、compressedの合計とduの結果合わないけどまあいいや。。
これを1テーブルにまとめてInfiniDBに突っ込んだ結果。
mysql> SHOW …[さらに読む]
かねてから予告していた通り、OSC広島と中国地方DB勉強会（第5回）に参加させて頂いた。両方のイベントがこの土日で連続して行われたので、いずれのイベントにも遠方からの参加者がたくさんいて盛況だったように思う。OSC広島ではデモマシンの展示を、中国地方DB勉強会ではスライド（MySQLのトラブルシューティングについて）の発表をそれぞれやらせて頂いたので、今日はその報告をさせて頂こう。
OSC広島に持っていったデモマシン既にツイッターやFacebookで目にされた方もいらっしゃるかも知れないが、今回展示したマシンのコンセプトは「持ち運べるMySQL Clusterのデモ環境」というものだ。MySQL Clusterを動作させるためのBeagle Bone Black …
[さらに読む]