久々にハマった！！昨日の夜と今朝の作業あわせて3〜4時間ぐらいはハマってたのではないだろうか…あ〜イライラ！とりあえず何故か分からないが、メールメッセージをrast-registerしようとすると、
g5:~/tmp/test k_ozaki$ /usr/local/rast/bin/rast-create db
g5:~/tmp/test k_ozaki$ /usr/local/rast/bin/rast-register db /Users/k_ozaki/Mail/inbox/352
error: no such filter module (message/rfc822)
と訳の分からないダダをこねる！no such filter module?ファックユー。/usr/local/rast/lib/rast/filters/ruby/rfc822.rbはちゃんと存在するぞー！中身にもちゃんとMIME_TYPE = "message/rfc822"とか定義してあるし。あ〜ここでこのファイルをrubyで一度実行していれば…ってそれは後々気がついた話ではあるので、まず読み続けてください。
なので、サルみたいにいろいろコンパイルオプション変えたりして何度もインストールを繰り返してみたりしたのだけど全くだめ。で、どこが問題でこのエラーがでているのか調査しようと思ったのだけどOSXにstraceがな〜い。ってかportsになかっただけなのだが。とうわけで近くにあるFedora CoreなLinuxマシンにログインしてrastをコンパイルして、同様にメールメッセージを追加しようとする。同じメッセージデターーー(゜∀゜)ーーー!!というわけで、straceしてみると、奇妙な箇所がいくつか
stat64("/usr/lib/site_ruby/1.8/Win32API.rb", 0xbf88b070) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/site_ruby/1.8/Win32API.so", 0xbf88b070) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/site_ruby/1.8/i386-linux/Win32API.rb", 0xbf88b070) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/site_ruby/1.8/i386-linux/Win32API.so", 0xbf88b070) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/site_ruby/Win32API.rb", 0xbf88b070) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/site_ruby/Win32API.so", 0xbf88b070) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/ruby/1.8/Win32API.rb", 0xbf88b070) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/ruby/1.8/Win32API.so", 0xbf88b070) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/ruby/1.8/i386-linux/Win32API.rb", 0xbf88b070) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/ruby/1.8/i386-linux/Win32API.so", 0xbf88b070) = -1 ENOENT (No such file or directory)
stat64("./Win32API.rb", 0xbf88b070) = -1 ENOENT (No such file or directory)
stat64("./Win32API.so", 0xbf88b070) = -1 ENOENT (No such file or directory)
rt_sigprocmask(SIG_SETMASK, [], NULL, 8) = 0
...
...
stat64("/usr/lib/site_ruby/1.8/htree.rb", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/site_ruby/1.8/htree.so", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/site_ruby/1.8/i386-linux/htree.rb", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/site_ruby/1.8/i386-linux/htree.so", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/site_ruby/htree.rb", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/site_ruby/htree.so", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/ruby/1.8/htree.rb", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/ruby/1.8/htree.so", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/ruby/1.8/i386-linux/htree.rb", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/ruby/1.8/i386-linux/htree.so", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("./htree.rb", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("./htree.so", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
rt_sigprocmask(SIG_SETMASK, [], NULL, 8) = 0
...
...
stat64("/usr/lib/site_ruby/1.8/mp3info.rb", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/site_ruby/1.8/mp3info.so", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/site_ruby/1.8/i386-linux/mp3info.rb", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/site_ruby/1.8/i386-linux/mp3info.so", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/site_ruby/mp3info.rb", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/site_ruby/mp3info.so", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/ruby/1.8/mp3info.rb", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/ruby/1.8/mp3info.so", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/ruby/1.8/i386-linux/mp3info.rb", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/ruby/1.8/i386-linux/mp3info.so", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("./mp3info.rb", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("./mp3info.so", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
rt_sigprocmask(SIG_SETMASK, [], NULL, 8) = 0
..
..
stat64("/usr/lib/site_ruby/1.8/zip/zip.rb", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/site_ruby/1.8/zip/zip.so", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/site_ruby/1.8/i386-linux/zip/zip.rb", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/site_ruby/1.8/i386-linux/zip/zip.so", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/site_ruby/zip/zip.rb", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/site_ruby/zip/zip.so", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/ruby/1.8/zip/zip.rb", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/ruby/1.8/zip/zip.so", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/ruby/1.8/i386-linux/zip/zip.rb", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/ruby/1.8/i386-linux/zip/zip.so", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("./zip/zip.rb", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("./zip/zip.so", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
rt_sigprocmask(SIG_SETMASK, [], NULL, 8) = 0
..
..
stat64("/usr/lib/site_ruby/1.8/tmail.rb", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/site_ruby/1.8/tmail.so", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/site_ruby/1.8/i386-linux/tmail.rb", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/site_ruby/1.8/i386-linux/tmail.so", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/site_ruby/tmail.rb", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/site_ruby/tmail.so", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/ruby/1.8/tmail.rb", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/ruby/1.8/tmail.so", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/ruby/1.8/i386-linux/tmail.rb", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("/usr/lib/ruby/1.8/i386-linux/tmail.so", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("./tmail.rb", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
stat64("./tmail.so", 0xbf88ceb0) = -1 ENOENT (No such file or directory)
rt_sigprocmask(SIG_SETMASK, [], NULL, 8) = 0
あ〜、だいたい分かった…これらが出ているのはそれぞれ/usr/local/rast/lib/rast/filters/ruby/配下にあるfilterを取り込もうとしている後に出ている。つまり、filterが依存しているライブラリが無いとfilterはRASTに取り込まれていないと…しかし上の不親切なメッセージじゃ分からないよな〜。な〜。これは取り込むときにエラーにするべきじゃないのか？そもそも取り込めないfilterなんてあっても意味ねーじゃん！（怒）というわけでOSXにrastをインストールおさらい編
$ sudo port install ruby
$ sudo port install file
$ sudo port install apr
$ sudo port install apr-util
$ sudo port install db4
$ sudo port install nkf
$ sudo port install icu
(utf8を使うためには必要)
$ curl -O http://projects.netlab.jp/rast/archives/rast-0.3.1.tar.bz2
$ tar xvjf rast-0.3.1.tar.bz2
$ cd rast-0.3.1
$ ./configure --prefix=/usr/local/rast \
--with-ruby=/opt/local/bin/ruby \
--with-apr-config=/opt/local/bin/apr-1-config \
--with-apu-config=/opt/local/bin/apu-1-config \
--with-icu-config=/opt/local/bin/icu-config \
--with-db-includes='-I/opt/local/include/db4' \
--with-db-libs='-L/opt/local/lib/ -ldb-4.3' \
--with-encodingdir=/usr/local/rast/lib/rast/encodings \
--with-filter-moduledir=/usr/local/rast/lib/rast/filters \
--with-ruby-filter-moduledir=/usr/local/rast/lib/rast/filters/ruby \
--with-default-encoding=utf8
$ cd ../
$
$ curl -O http://i.loveruby.net/archive/tmail/tmail-0.10.8.tar.gz
(rfc822フィルターを使うのに必要)
$ tar xvzf tmail-0.10.8.tar.gz
$ cd tmail-0.10.8
$ ruby setup.rb config (rubyはportsの方を優先していなかったら/opt/local/bin/rubyな)
$ ruby setup.rb setup
$ sudo ruby setup.rb install
$ cd ../
$
$ curl -O http://cvs.m17n.org/viewcvs/ruby/htree.tar.gz
(htmlフィルターを使うのに必要)
$ tar xvzf htree.tar.gz
$ cd htree
$ sudo ruby install.rb
$ cd ../
$
$ curl -O http://rubyforge.org/frs/download.php/7537/ruby-mp3info-0.5.tar.bz2
(mp3フィルターを使うのに必要。他http://ruby-mp3info.rubyforge.org/参照)
$ cd ruby-mp3info-0.5
$ ruby install.rb config
$ ruby install.rb setup
$ sudo ruby install.rb install
$ cd ../
$
$ curl -O http://jaist.dl.sourceforge.net/sourceforge/rubyzip/rubyzip-0.5.12.tgz
(zipフィルターを使うのに必要。他http://ruby-mp3info.rubyforge.org/参照)
$ tar xzf rubyzip-0.5.12.tgz
$ cd rubyzip-0.5.12
$ sudo ruby install.rb
$ cd ../
疲れた！これからmew-gigi編です。
参考URL
RastをOSXにインストール
[rast-ja:50] Re: rast-registerで登録に失敗します
_ [develop][symfony] string型な列でORDER BYしようとすると勝手にUPPER()される(プチハマリ)
ちょーウゼー！！！またハマった！！会社の奴らは新規オープン焼き肉店で半額焼き肉食ったあげくにレジで注文商品の計上ミスられてさらに割安で焼き肉くっている間に俺はsymfonyのソースコード読みまくりだぜ！！！今日はRASTでもハマったしほんとハマりでーだ。で、ここで問題です。symfonyでmysqlなschema.xmlをpropel-build-modelするとbigint型はstring型と定義されます。lib/model/om/map参照。で、ここで最悪な事に、symfonyのBasePeer.phpは、Criteriaにstring型なカラムがORDER BYの条件に入っているとそれをUPPER() でくくるという仕組みになっています(symfony-0.6.1 php/symfony/vendor/propel/util/BasePeer.php Line 821参照。あ〜、gonzui欲しいね)。んで、これが何で問題になるかというと、下記参照
mysql> select id,disk_usage from test_group order by disk_usage desc limit 10;
+------+------------+
| id | disk_usage |
+------+------------+
| 802 | 930773826 |
| 1265 | 667368078 |
| 832 | 602875007 |
| 519 | 509407571 |
| 669 | 242050622 |
| 978 | 222521438 |
| 762 | 163448848 |
| 1187 | 124704552 |
| 771 | 103013274 |
| 964 | 99852434 |
+------+------------+
10 rows in set (0.00 sec)
mysql> select id,disk_usage from test_group order by upper(disk_usage) desc limit 10;
+------+------------+
| id | disk_usage |
+------+------------+
| 964 | 99852434 |
| 675 | 98052230 |
| 802 | 930773826 |
| 927 | 8192 |
| 521 | 8192 |
| 765 | 8192 |
| 735 | 8192 |
| 620 | 7899090 |
| 517 | 67298974 |
| 1265 | 667368078 |
+------+------------+
10 rows in set (0.00 sec)
で、どうやらORDER BYを処理する際に、あらかじめ対象のカラムに関数が定義されている場合(例えばLOWER()とか、SUM() とか)はUPPER()はつけないようです。下記参照(symfony-0.6.1 php/symfony/vendor/propel/util/BasePeer.php Line 781〜)
if (strpos($orderByColumn, '(') !== false) {
$orderByClause[] = $orderByColumn;
continue;
}
というわけで、超場当たり的な処置としては、CriteriaでaddAscendingOrderByColumnにbigintなカラムを指定する場合は、下記のようにします
$c->addAscendingOrderByColumn('('.GroupPeer::DISK_USAGE.')');
これでいいのか……とりあえず動いている
よし飯食いにいくぞー！
_ shota [Criteria周りはHibernateのものとかなり似ていますので、Hibernateで知識を仕入れるといいかもし..]
_ おざき [なるほどね〜！それはいい手かも！！ありがとう いまちょっとHibernateのドキュメント見てみたんだけど、 Cr..]