おふとんの中から寝言をつぶやく

png = qr.as_png( resize_gte_to: false, resize_exactly_to: false, fill: 'white', color_mode: ChunkyPNG::COLOR_GRAYSCALE, color: 'black', size: 200, border_modules: 4, module_px_size: 10, file: nil #path to write )

png = qr.as_png( resize_gte_to: false, resize_exactly_to: false, fill: ChunkyPNG::Color.rgba(255,255,255,254), color_mode: ChunkyPNG::COLOR_GRAYSCALE, color: 'black', size: 200, border_modules: 4, module_px_size: 10, file: nil #path to write )

最近 https://kaori-info.com というサイトを作りました。

mysqlはまだわかってないことが多くて、ディスクを使い切ってしまいました。

理由と解決方法を調べたので備忘録として書いておきます。

何が起きていたか

ある日、サイトを見ると、500 internal errorが出ていたので何だろうと思ってサーバーに繋いで見に行きました。

インターナルエラーは、経験的にはアプリケーションサーバーが落ちてるか、データベースにつなげられない時が多かったので順番に見ていきました。アプリケーションサーバーは生きていたので、mysqlにログインしてみたところ、こちらもログインは出来ました。しかし操作ができないことに気がつきました。それでdfコマンドを使ってみたらディスクを使い切ってることがわかりました。

解決方法

容量を喰っているところを探す

どこで大量に使われているかを探すために次のコマンドを実行しました。

# cd /

# du -d1 -h |sort -h

として段階的にディレクトリを潜っていきました。

たどり着いたところが/var/lib/mysqlでした。

そこにたくさんあるbinlog.* 。

これでディスクを使い切っていました。

このログは、更新したときのログで、更新に失敗したりしたときに使うログらしいということがわかりました。

わたしは今のところそのログが無くても問題ないので、binlogの削除方法を探していてこの記事にたどり着きました。

MySQLのバイナリログ削除タイミング

このbinlogはファイルを削除するだけではダメなようなので、mysqlコンソールからbinlogを削除していきます。

ストレージの追加

困ったのは、mysqlにつなげられるものの、ディスクがいっぱいなので削除操作さえできないことでした。

conohaにサーバーを借りてるのでストレージを追加して、binlogの新しい方をいくらか待避してからpurgeしてある程度ディスクが空いたら、待避したbinlogを元の場所に戻してmysqlからpurgeすることにしました。

ストレージ追加方法

ストレージを借りて、VPC(VM)に接続（アタッチ）します。このときVPCが動いているとつなげられないので、一度シャットダウンします。

アタッチできたら、VPCを起動してログインし、lsblkで接続されているデバイス名を調べます。

fileコマンドを使って、初期化しようとしているデバイスが空っぽか確認します。

そのデバイスをmkfsして初期化します。

具体的なコマンドは下記を参考にしてください。

Linux インスタンスを選ぶと出てきます。デバイス名は使ってる会社やシステムによって違うので、よく確認してください。

アタッチしたストレージの初期化～追加方法 Amazon EBS ボリュームを使用できるようにする

binlogの一部待避

そのドライブをmountでマウントして必要ならディレクトリを作って、さきほどのbinlogを一部移動させます。

例えば、新しいストレージを/mntにマウントしているとして、

# mv /var/lib/mysql/binlog.xxx6* /mnt

などとしてファイルを待避します。

削除する

ls binlog.* |head -20

とコマンドを打って、削除対象の具体的なファイル名を見つけます。

次に、

# mysql -u root

として、mysqlのコンソールを出して、

# purge master logs to 'binlog.xxxxxx';

とコマンドを書いて実行します。（binlogは別の名前のこともあるようです）

'binlog.xxxxxx'のxxxxxxの部分は数字なのですが、このpurgeコマンドは、その数字の1つ前までを一気に消してくれるので、最初少しずつ削っていって、負荷にもよりますが、わたしは半分くらい削ったところで一気に消しました。

以後のための対処方法

そして、/etc/mysql/mysql.conf.d を編集し

[mysqld]
expire_logs_days=7

を追加しておきました。

そしてmysqldの再起動を忘れないように…

MySQL運用・管理［実践］入門〜安全かつ高速にデータを扱う内部構造・動作原理を学ぶ

作者:yoku0825,北川健太郎,tom__bo,坂井恵
技術評論社

Amazon

Setting up grub-efi-amd64-signed (1.202.2+2.12-1ubuntu7.1) ... mount: /var/lib/grub/esp: special device /dev/disk/by-id/scsi-0ATA_QEMU_HARDDISK_QM00001-part1 does not exist. dmesg(1) may have more information after failed mount system call. dpkg: error processing package grub-efi-amd64-signed (--configure): installed grub-efi-amd64-signed package post-installation script subprocess returned error exit status 32

おふとんの中から寝言をつぶやく

ビットコインなどの暗号(仮想)通貨関連の話題を中心に雑多に書きます。

rubyのrqrcodeで背景色を白にしたQRコードを作る

mysqlのbinlogでディスク容量を使い切った話