集計をする際は、主にGROUP BYを多く用いる。

YEAR(), MONTH(), DAY(), DAYNAME(), EXTRACT()が便利。

WHERE で条件しぼるんじゃないらしい（ｦｲ）

2010-05 2010-06 等で年月別の集計なら、

SELECT EXTRACT(YEAR_MONTH FROM `datetime`) as 'year_month' ,
SUM(`price`) as price
FROM `hoge_table`
GROUP BY EXTRACT(YEAR_MONTH FROM `datetime `);

とか。（参照ページの例文に間違い有り as が抜けているのと エイリアスとして year_month と言う文字列を指定する場合はクォートで囲まないとエラーになる）

year_month	price
200811	34259
200812	49258
200901	67447

結果はこんな感じになる。

参照：MySQLの知っていると便利な構文（その2）

整数型カラムをUNSIGNEDして利用している時、負の数にならないのをいい事に0から減算して負の数の場合は0と自動で処理してくるものだと思っていた。（MySQL4.x時にはそのように処理されていた。）

本当はプログラム側で処理するべきなのかもしれないけれど、楽してそのようなスクリプトを書いていた。

で、先日MySQL5.xの環境に移行したらデータがおかしくなっていた。

とてつもなく大きな数字となっており？？？状態。

どうやら、UNSIGNEDしているカラムが0で、そこから1を引くと4294967295のような値になってしまうようだ。

これを回避するにはコマンドラインオプションで

–sql-mode=NO_UNSIGNED_SUBTRACTION

とするか、SQL発行時に

SET SQL_MODE=’NO_UNSIGNED_SUBTRACTION’;

とすると大丈夫のようだ。

参考： http://mlog.euqset.org/archives/ml@mysql.gr.jp/14844.html

yum erase postfix

ダウンロード

最新版の確認（/5.x/centosplus/SRPMS/より）

rpm -ivh http://ftp.riken.jp/Linux/centos/5.4/centosplus/SRPMS/postfix-2.3.3-2.1.centos.mysql_pgsql.src.rpm

コンパイル前の下準備

Postfix をMySQL対応にするためpostfix.specを編集。

cd /usr/src/redhat/SPECS/
vi postfix.spec
..
%define MYSQL 1　←確認（0なら1に修正）
..

コンパイル

srpmからrpmを作成する。

rpmbuild -bb postfix.spec

インストール

出来上がったRPMをインストールする。

cd /usr/src/redhat/RPMS/i386/
rpm -Uvh postfix-2.3.3-2.1.centos.mysql_pgsql.i386.rpm

yumの自動アップデートから外す

yum update で postfix* なパッケージがアップデートされなくなる。

これをしないとyumの自動アップデート時にMySQL非対応に戻ってしまう。

vi /etc/yum.conf
 exclude=postfix*　←最終業に追記

↑手動でもやりましたけど
Postfixをyumでアップデートしてしまった orz…

SELECT * FROM  `table` WHERE  `datetime` LIKE  '2009-05-17%'

SELECT * FROM  `table`
WHERE  `date_time` BETWEEN '2009-05-17' AND '2009-05-17' + INTERVAL 1 DAY

実行時間計測の例
行数：13,776行
データ：2,935KB
インデックス：datetime

SELECT SUM(  `col` ) FROM  `table`
WHERE  `datetime` LIKE  '2009-05-17%'

フルスキャン
実行時間：0.0235 秒

SELECT SUM(  `col` ) FROM  `table`
WHERE  DATE(datetime) =  '2009-05-17'

フルスキャン
実行時間：0.0383 秒

SELECT SUM(  `col` ) FROM  `table`
WHERE `date_time` BETWEEN  '2009-05-17' AND  '2009-05-17' + INTERVAL 1 DAY

インデックス使用
実行時間：0.0009 秒

my $dbh = DBI->connect(
‘DBI:mysql:database=sandbox;host=localhost;mysql_read_default_file=/etc/mysql/my.cnf’,
qw/id password/,
);

または接続後に

$dbh->{ mysql_enable_utf8 } = 1;

この辺の記事
http://www.geminium.com/chiba_blog/2009/02/

yum install phpmyadmin

/usr/share/phpmyadmin にインストールされる。
/usr/share/phpmyadmin/config.inc.phpを編集
$cfg['blowfish_secret']を設定。

/*
* This is needed for cookie based authentication to encrypt password in
* cookie
*/
$cfg['blowfish_secret'] = ‘*************’; /* YOU MUST FILL IN THIS FOR COOKIE AUTH! */

「mcrypt 拡張をロードできません。PHP の設定を確認してください」というエラーが出たのでインストール。

yum -y install php-mbstring
yum -y install php-mcrypt

phpでマルチバイト処理をするには「php-mbstring」が必要.
CentOS5だと上記でよいが、CentOS4だとインストールされない。

CentOS4での手順
１．mcryptを組み込むのに必要なlibmcryptをrpmforgeからインストールします。

# yum -y –enablerepo=rpmforge install libmcrypt-devel

２．php用のmcrypt拡張モジュールをPHPRPMsよりダウンロードします。

# cd /usr/src/redhat/RPMS/i386/
# wget http://jaist.dl.sourceforge.net/sourceforge/phprpms/php-mcrypt-4.3.9-3.2.1.i386.rpm

最新版は http://phprpms.sourceforge.net/mcrypt で確認して下さい。
CentOSはRHEL互換なのでRHEL4の物を落としました。
X86_64で無いならばi386で問題ありません。

３．ダウンロードしたrpmをインストールします。

# rpm -Uvh php-mcrypt-4.3.9-3.2.1.i386.rpm

参考： http://centossrv.com/bbshtml/webpatio/364.shtml

・・・が、http://phprpms.sourceforge.net/mcryptは現在無い…。
しょうがないので、http://rpm.pbone.net/で探す。
キーワード「php-mcrypt」CentOS 4 とRedHat EL 4 にチェックを入れサーチ。

# php -v

でPHP 4.3.9dだったので、
RedHat EL 4 ftp.sourceforge.net/pub/sourceforge/p/project/ph/phprpms/RHEL4 PHP RPMs/4.3.9-3.2/php-mcrypt-4.3.9-3.2.1.i386.rpm
http://rpm.pbone.net/index.php3/stat/4/idpl/12753489/com/php-mcrypt-4.3.9-3.2.1.i386.rpm.html

が、見つかったのでこれを使ってみる。

# wget ftp://ftp.pbone.net/mirror/ftp.sourceforge.net/pub/sourceforge/p/project/ph/phprpms/RHEL4%20PHP%20RPMs/4.3.9-3.2/php-mcrypt-4.3.9-3.2.1.i386.rpm

rpm -ivh php-mcrypt-4.3.9-3.2.1.i386.rpm

成功した。

Apacheの設定。
/etc/httpd/conf.d/phpmyadmin.conf が作成されるので適時修正。
Apache再起動。

my.cnf (MySQL4.12)

[mysqld]
datadir=/var/lib/mysql
socket=/var/lib/mysql/mysql.sock
# Default to using old password format for compatibility with mysql 3.x
# clients (those using the mysqlclient10 compatibility package).
old_passwords=1

[mysql.server]
user=mysql
basedir=/var/lib

[mysqld_safe]
err-log=/var/log/mysqld.log
pid-file=/var/run/mysqld/mysqld.pid

１）mecabのインストール

mecabのインストール

２）sennaのインストール

senna 1.1.4のインストール

３）インストールするのはTritonn（MySQL5.0.67）
/usr/local/mysql5にインストールする
※mecab sennaはインストール済み

wget http://iij.dl.sourceforge.jp/tritonn/36449/tritonn-1.0.12-mysql-5.0.67.tar.gz
tar xzf tritonn-1.0.12-mysql-5.0.67.tar.gz
cd tritonn-1.0.12-mysql-5.0.67
su–
./configure –prefix=/usr/local/mysql5 –localstatedir=/usr/local/mysql5/data –with-unix-socket-path=/usr/local/mysql5/data/mysql5.sock –with-tcp-port=3307 –with-charset=utf8 –with-extra-charsets=all –with-mysqld-user=mysql –with-senna –with-mecab
make
mkdir /usr/local/mysql5
make install
cd /usr/local/mysql5
mkdir /usr/local/mysql5/data
chown -R mysql:mysql /usr/local/mysql5
su mysql
./bin/mysql_install_db –datadir=/usr/local/mysql5/data

複数インストールしない場合のconfigureオプションはこんな感じ

CC=’gcc’ CFLAGS=’-g’ CXX=’gcc’ CXXFLAGS=’-g’ LDFLAGS=” ASFLAGS=” \
./configure \
‘–prefix=/usr/local/mysql’ \
‘–localstatedir=/usr/local/mysql/data’ \
‘–libexecdir=/usr/local/mysql/bin’ \
‘–with-comment=MySQL Community Server (GPL)’ \
‘–with-server-suffix=’ \
‘–enable-thread-safe-client’ \
‘–enable-local-infile’ \
‘–enable-assembler’ \
‘–with-pic’ \
‘–with-fast-mutexes’ \
‘–with-client-ldflags=-static’ \
‘–with-mysqld-ldflags=-static’ \
‘–with-zlib-dir=bundled’ \
‘–with-big-tables’ \
‘–with-yassl’ \
‘–with-readline’ \
‘–with-archive-storage-engine’ \
‘–with-blackhole-storage-engine’ \
‘–with-ndbcluster’ \
‘–with-csv-storage-engine’ \
‘–with-example-storage-engine’ \
‘–with-federated-storage-engine’ \
‘–with-innodb’ \
‘–with-charset=utf8′ \
‘–with-extra-charsets=all’ \
‘–with-senna’ ‘–with-mecab’

configure時に以下のエラーが出た時の対処

checking for termcap functions library… configure: error: No curses/termcap library found

curses/termcapのライブラリが無いらしい

yum install ncurses-devel

４）データベースの初期化

/usr/local/mysql/bin/mysql_install_db –user=mysql

５）初期ユーザー作成
MySQL起動後に初期ユーザーrootでログイン。
このrootはローカルから接続出来るユーザー。

初期ユーザーを全て削除し、新規ユーザーを作成する。

./bin/mysqld_safe –defaults-file=/etc/my5.cnf –pid-file=/var/run/mysqld/mysqld5.pid &
/usr/local/mysql5/bin/mysql –user=root

MySQLに接続後、既存ユーザー削除

/usr/local/mysql5/bin/mysql –user=root
mysql> TRUNCATE TABLE mysql.user;

mysql> FLUSH PRIVILEGES;

管理ユーザー作成( 管理ユーザー：root パスワード：password)

mysql> GRANT ALL PRIVILEGES ON *.* TO ‘root’@'localhost’ IDENTIFIED BY ‘password’ WITH GRANT OPTION;

補足：シンボリックリンクを貼って「mysql5」でアクセスする

su –
ln -s /usr/local/mysql5/bin/mysql /usr/bin/mysql5

$ mysql5 –user=***** –password=************
でアクセス可能。

実験スクリプト

INSERT を100万回繰り返す。

for(1..1000000){
$sql = <<"EOM";
INSERT INTO `table_name`
(`col1`,`col2`,`col3`,`col4`) VALUES ('10','11','12','13');
EOM

$sth = $dbh->do($sql)|| die $dbh->errstr;
}

結果：途中でサーバエラー

Server error!

The server encountered an internal error and was unable to complete your request.

Error message:

Premature end of script headers: xxxx.cgi

If you think this is a server error, please contact the webmaster.

Error 500

httpd/error_logの出力：

[Fri Feb 06 20:04:00 2009] [error] [client xx.xxx.xxx.xxx] Premature end of script headers: sql.cgi

挿入されたデータ：約83万行

httpd.confの設定が、TimeOut 60によるエラーか？

これで$idに「自分が追加した最新のauto_increment番号」が代入される

ただし下記のようにdoでは使えない。

$sql = "INSERT INTO `db_01` ( data1, data2 ) VALUES ( $data1, $data2 )";
$sth = $dbh->do( "$sql" );
$id = $sth->{mysql_insertid};