2019-05-15

centos6.8 メモリ使用量の考察

apache linux mysql

メモリ解放について調べていて知ったことについて。
以下サイトからの引用。

Linux の top コマンドや free コマンドで表示される cached は、勝手にどんどん増えていきます。free がなくなるとこの cached が少しずつ解放されて使われます。
cached も buffers も空きメモリの一部ですので、これらが溜まっているからといって無理やり解放させる必要は通常はありません。
cached を溜めているのはパフォーマンスのためなので、解放させると通常使用時のパフォーマンスが落ちます。逆にこれを解放しておかないと、パフォーマンスの測定などで、正しい計測ができません。

linuxのキャッシュには、ページキャッシュとSlab（dentry：ディレクトリエントリやinodeのキャッシュ）キャッシュが存在する。キャッシュをクリアしたい場合、以下のコマンドを実行すればよい。

sync
echo 3 > /proc/sys/vm/drop_caches

キャッシュの状況についてはfreeコマンドが分かりやすい(-mでMB表示)

free -m

mysqlとhttpを動かしている状況で900MBくらいメモリを使用している状況で以下の3つのコマンドを実行してみたら、メモリ使用量が200MBまで減ったｗ

service httpd restart
service mysqld restart
echo 3 > /proc/sys/vm/drop_caches

やっぱりmysqlとhttp(php)の2つがメモリを食う筆頭なんだよなあ。サーバー組む時も、この2つを別サーバーに分けるのはやっぱり理にかなっているってことだな。

参考サイト
Linuxでページキャッシュを確認・解放してみた - Qiita
【Linux】メモリのキャッシュをクリアする at softelメモ
 Linux：キャッシュを開放する（/proc/sys/vm/drop_caches） - ログってなんぼ

低予算から始めるFX
低予算(1000通貨)で比較 | FX比較低予算から始めるFXランキング初心者の外為入門

2019-05-15

cakephp mysql 結局update文を繰り返すともりもりメモリが消費されていく件

cakephp mysql

cakephpのバッチの中で、saveメソッドでupdateを繰り返すと、どんどんメモリが消費されていく。

んで、色々試したけど結局解決出来なかった。素のphp+mysql_queryメソッドでも同じ結果だった。

php内であればガベージコレクタが働くけど、前のcurlやmysqlといった外部のリソースになると、php側ではどうすることも出来ない。

phpが終了すれば解放されるから、一度に大量のクエリを発行しないように工夫するしかないんだろう。

FXを始めるのにおススメサイト
低予算(1000通貨)で比較 | FX比較低予算から始めるFXランキング初心者の外為入門

2019-05-15

centos6.8 curlがメモリリークしていたのでバージョンアップした件

linux

あるphpを実行していたらどんどんメモリが減っていって数日悩んでいたんだけど、やっと原因が分かったわ。php => mws sdk => curl っていう流れでcurlを実行していて、色んなサイトも参考したところ、まさかのcurlがメモリリークする原因だった。そんでcurlのバージョンアップしてみたら見事にメモリリークが解消された。単純にyumだと更新出来なかったので以下の手順で更新した。毎度のことだけど、参考サイトに感謝。

curl -V
>curl 7.19.7

cd /usr/local/src/
wget http://mirror.city-fan.org/ftp/contrib/sysutils/Mirroring/curl-7.64.1-2.0.cf.rhel6.src.rpm

rpmbuild --rebuild curl-7.64.1-2.0.cf.rhel6.src.rpm
>失敗したので以下適当に入れた物

yum install rpm-build
yum install gcc
yum install openldap-devel libmetalink-devel libnghttp2-devel nghttp2 perl-interpreter gnutls-utils

yum --enablerepo=epel install libmetalink-devel
yum --enablerepo=epel install libnghttp2-devel
yum --enablerepo=epel install nghttp2
yum --enablerepo=epel install perl-interpreter
yum install perl-Compress-Zlib

rpmbuild --rebuild curl-7.64.1-2.0.cf.rhel6.src.rpm
>再実行
>10-20分くらいかかる

cd
rpm -Uvh rpmbuild/RPMS/x86_64/curl-7.64.1-2.0.cf.rhel6.x86_64.rpm rpmbuild/RPMS/x86_64/libcurl-7.64.1-2.0.cf.rhel6.x86_64.rpm rpmbuild/RPMS/x86_64/libcurl-devel-7.64.1-2.0.cf.rhel6.x86_64.rpm

curl -V
>curl 7.64.1

参考サイト
https://mome-n.com/curl-7-19-7%E3%81%A7%E3%83%A1%E3%83%A2%E3%83%AA%E3%83%AA%E3%83%BC%E3%82%AF%E3%81%99%E3%82%8B/
https://qiita.com/comefigo/items/6f2fe9c086550835c033
http://s-tajima.hateblo.jp/entry/2015/02/20/233615
https://dev.classmethod.jp/cloud/aws/dentry-cache/
https://qiita.com/KensukeSakakibara/items/6d1d59848d5b179f77c5

FXを始めるのにおススメサイト
低予算(1000通貨)で比較 | FX比較低予算から始めるFXランキング初心者の外為入門

2019-05-15

php プログラムがメモリリークしているかチェックする方法

php cakephp

vmstatのfreeを見れば良い。メモリリークしていればfreeがどんどん減っていく。(目的以外のプログラムが動いていないか(cronとかで)注意。)

[root]# vmstat 1
procs -----------memory---------- ---swap-- -----io---- --system-- -----cpu-----
 r  b   swpd   free   buff  cache   si   so    bi    bo   in   cs us sy id wa st
 0  0      0  99576  29064 300112    0    0   171   215   85  135  3  0 95  2  0
 0  0      0  99452  29128 300116    0    0     0   876  139  381  2  1 48 48  0
 0  0      0  99452  29136 300116    0    0     0    28   47   75  1  0 99  0  0
 0  0      0  99328  29200 300120    0    0     4   528  133  331  2  0 96  2  0
 0  0      0  99328  29208 300120    0    0     0    28   57   76  0  0 100  0  0
 0  0      0  99328  29256 300124    0    0     0   124  107  284  2  0 97  1  0
 0  0      0  99204  29320 300128    0    0     4   880  157  370  3  0 48 48  0
 0  0      0  99204  29328 300128    0    0     0    28   55   75  1  1 97  1  0
 0  0      0  99080  29376 300136    0    0     4   116  101  275  2  0 97  1  0
 0  0      0  99080  29440 300148    0    0     0   984  152  390  2  0 46 52  0
 0  0      0  99080  29456 300136    0    0     0    44   48   92  0  0 100  0  0
 0  0      0  98956  29512 300144    0    0     4   512  133  318  2  0 96  2  0

FXを始めるのにおススメサイト
低予算(1000通貨)で比較 | FX比較低予算から始めるFXランキング初心者の外為入門