Weblog改造日記その４〜 文字コードとデータベース

サーバ新調に伴い必然的にWeblogも引っ越しました。
ここで旧サーバのエントリーデータを新サーバに移すという作業が発生します。
ただ引っ越すだけでは面白みが無いのでMovableTypeの根本的なところを再構築しました。

１.データベースを Berkeley DB から MySQL に変更
２.文字コードをUTF-8からEUCコードに変更

どちらもこういう機会だからこそ思い切って実行出来ます。

■データベースを Berkeley DB から MySQL に変更

MT では標準で Berkeley DB をデータベースに利用するのですが、オプションで MySQLやPostgreSQL,SQLite といったRDBMSも使用出来ます。 エントリーが多くなってくるとRDBMSを使ったほうが再構築の時間が早いという話を聞いたので、この機会にMySQLを利用する事にしました。 本当はPostgreSQLのほうが使い慣れているのですが、XOOPSを何かの機会に使ってみたいと思ったのでMySQLをインストールしました。

MySQLのインストールについてはこちらのblogページを参考にさせていただきました。

■文字コードをUTF-8からEUCコードに変更

blogの世界ではUTF-8がスタンダードなのですが、Safari がまだきちんと表示してくれません。 文字化けするわけではないのですが途中で表示が切れてしまうことがあります。最初は自分のコンテンツのせいかと思っていたのですが、他のひとのUTF-8ページを見ても同じように途切れて表示されるのを度々見るので Safariの UTF-8表示に問題があるようです。文字エンコードをデフォルトからUTF-8にしたり、その逆にしたりするときれいに表示されるのですが、これはまだSafariがバージョン1.1 ということで今後のバグフィックスを待つしか無いようです。 Safariユーザを見捨てるという選択肢もあるのですが、僕自身Safariユーザですし、ここを見に来てくれる友達もSafariユーザが多い。おまけにMicrosoft は MacIE の開発中止を発表してしまった。 という事でEUC コードへの変更を決意しました。

まずは新サーバで新しいMTをインストール。日本語ランゲージパックをインストールしてEUC対応させます。ここまではUTF-8で立ち上げるかEUCで立ち上がるかの違いだけなので何も難しい事はありません。
基本的な設定を旧サーバと同様にセッティングして、次にエントリーデータの移行です。
MovableType の管理画面には標準でデータのエキスポート、インポート機能が付いています。
これは他のWeblogツールからMTに移行したりデータのバックアップを取るのにも使えますが、今回のようにサーバの引っ越しの際にも役立つ機能です。
「書き出し・読み込み」メニューの「BananaBlog からエントリーを書き出す」のリンクをクリックしてデータをローカルにセーブします。
ローカルにセーブされたファイルはUTF-8になっているのでテキストエディタ等で開いてEUCコードに変更保存します。
そしてそのファイルをMTのcgiディレクトリ下のimportディレクトリにアップロードします。
再び管理画面の「書き出し・読み込み」メニューから「エントリーの読み込み」ボタンを押せばインポート終了！ あっけなくデータは移行されました。

■不具合ひんぱつ

これで難なく移行完了！といけば理想なのですが、そうは問屋がおろしません。不具合があちこちに現れます。

・mt-rssfeed のエラー

XML-RPC の標準が UTF-8 ということで何となくいやな予感はしていたのですがやっぱりEUCだと文字化けします。正確に言えば処理は正しく動いているのですが出力されるのが UTF-8 なのでEUCのページに埋め込むと文字化けするわけです。ではどうやって出力をEUCにするのか？ mt-jcode を使う方法もあるようですが 別テンプレートにして mt-rebuild.pl を cron で定期的に実行している自分は単純明快にcronシェルの最後で nkf 使っちゃいました。終わりよければ全て良し。 FileMgr/Local.pm で Wide character in print at というメッセージが出る事もありますが特に気にしなくてもいいようです。 cron実行してるのなら RSSFeed 用のテンプレートの「インデックス・テンプレートを再構築するときにこのテンプレートを自動的に再構築する」のチェックははずしておきましょう。

余談ですが、僕はRSSFeedテンプレートの中に友達の名前として日本語を固定で使ってます。
これをテンプレートとして管理画面で登録するとEUCになります。しかし mt-rssfeed は UTF-8 で出力するので文字化けします。どうすればいいんでしょう？ これはiBlog で使われている数値文字参照形式の文字コードを使用しました。iBlog を使っているページのHTMLソースを見ると日本語の部分が
あいうえお
のような文字列になっているのがわかります。これが数値文字参照と呼ばれるものです。
僕はiBlogで文字入力したものをコピーペーストしました。

・aws.pl のエラー

Amazon Web Service 用のプラグインもご多分に漏れず EUC だと問題ありです。

MT::App::CMS=HASH(0x80655e8) Use of uninitialized value in sprintf at /var/www/html/mt3/plugins/aws.pl line 148.
MT::App::CMS=HASH(0x80655e8) Wide character in print at /var/www/html/mt3/lib/MT/FileMgr/Local.pm line 88.
このようなエラーでデータを引っ張ってこれず空白になってしまう模様。
これもいろいろ調べてみるとこちらに対処法が載っていたのでさっそく試してみます。
うまく行きそうな感じだったけど今度はなぜか

syntax error at line 1, column 49, byte 49 at /usr/lib/perl5/vendor_perl/5.8.0/i386-linux-thread-multi/XML/Parser.pm line 185
こんなかんじのエラーが。
途方にくれましたがサーバリブートしてみたらエラーが出なくなりました。謎。

・最新のコメントが表示されない

何事も無かったかのように最新のコメントが一切表示されなくなりました。 いろいろ調べてみるとMySQLを使用している時に起こる事があるようです。 「一時的なテーブルを作成する権限」というのが必要なそうなので以下のコマンドで調べてみると mysqlaccess localhost mtuser mtdata -p -U root -P 権限設定一覧の Create_tmp_table_priv が "N" になっていました。こいつに権限割当してやれば良さそうです。 mysql -u root mysql -p grant create temporary tables on mtdata.* to mtuser@localhost identified by 'password'; これで最新のコメントが表示されるようになりました。

・RSS が EUCで出力される

MT の文字コードをEUCにすると RSSもEUCコードで出力されます。 それでいいじゃんという気もしますが、受け取り側でEUCを認識してくれないと文字化けしたりおかしなことになったりします。受け取り側に対応してもらう方法もありますが RSS を公開している以上、公開側で対応するのが正しい選択でしょう。 要はMTコンテンツはEUCでもRSSはUTF-8で出力するようにするという事です。 こちらのページを参考に対応しました。 これでRSSもばっちりです。

このようにデータの移行自体はあっさり行えたのですが他の部分、特にXML関連の部分でとても苦労しました。EUCにしてSafariで問題なく表示出来るようになったのはいいのですが XMLを利用した面白いプラグインが出たりする度に対応しなければならなくなる可能性があります。基本機能しか使わないのであればいいかもしれませんが、いろんなMTの機能を使ってみたい人にはEUCでの運用はいばらの道かもしれません。こんなことしてる間にSafariのバグフィックスが明日リリースされても不思議ではないですし。MTをこれから立ち上げようとしている方は悪い事は言わないので UTF-8 にしましょう（笑）
僕もきっとそのうちまた UTF-8 に戻すと思います。

・TrackBack 文字化け対策

TrackBack を送信すると文字化けする事に気づきました（汗）しかもMac系のライターとして著名な林 信行さんのblogサイトに。。（大汗） こっちが悪いのに逆に謝られてしまって大恐縮です。。 TrackBackも何もしないとEUCコードでTrackBackを送ってしまうので送り先が特別な処理をしない限り文字化けのTrackBackを送ってしまう事になります。一度送ってしまったTrackBackはこちらからは削除出来ません。 これも前述のRSS同様に送信側で対応しておくのがマナーでしょう。気付かないでTrackBackを送りまくると新手のスパマーと間違えられるので注意しましょう。(^^; この対策はEUCユーザーの強い味方？みらのさんのblogページを参考に修正対応しました。 修正する時は万一動かなくなった時の為に修正前のものをバックアップしておきましょう。 デモ用に昔作ったblogページにテストでTrackBackを送ってみましたが文字化けしなかったのでたぶんこれでイケてると思います。 今度 TrackBack 打つ時はちょっとドキドキです。。（苦笑）

・TrackBack 受付

TrackBack を他サイトから受け付けられない状態になっていました。 上記と同様にみらのさんのblogページを参考に修正しました。とりあえずうまく受け取れる事を確認しました。 ただこのページを見ると内容が古いと追記してあるので、みらのさんの最新日本語パッチを使うのが一番いいのかもしれません。

・TrackBack 受付修正

上記方法ではTrackBackを受け付ける際に送られてくるサイトによっては文字化けが発生することがわかりました。 結局、横着をせずにみらのさんの最新のパッチ情報を元に手動で修正（全て見直し）。 前回の修正部分は必要無いので忘れずに元に戻しておきましょう。

投稿者 うっちー : 2003年11月23日 14:52 | コメント (5) | トラックバック (7)