[ruby-dev:40551] Re: [Feature #2833] 絵文字エンコーディングの提案

成瀬です。

2010年3月3日14:45 takeru sasaki <[e-mail]>:
> Railsのjpmobileというプラグイン
> http://jpmobile-rails.org/
> で絵文字を変換しています。

jpmobile の設楽さんはこの件の貢献者の一人ですね。

>> 以下のような fallback つきのコンバータを標準で提供しておけば、
>> 個々のニーズについては fallback 変換表を gem で配布してもらうだけ
>> 済むかもしれません。
>
> もっと深い「個々のニーズ」を考えると絵文字同士の変換表をカスタマイズしたい場合があります。
> Googleの変換表は足がかりとしてすばらしいのですが、案件やサイトごとに微妙に違う変換表を
> つくったりします。（顔の表情が気に入らないからこの絵文字は使わない、とか）
> Docomo<=>KDDI、KDDI<=>Softbank、Softbank<=>Docomoの３方向で作ります。
> 具体的にどの絵文字かという話ではなく、案件ごと、サイトごとなのです。

まず、「文字コードの変換」というのはわたしはバイト列同士の変換だと考えています。
つまり、バイト単位で読み込み、判定し、別のバイト列に変えるのが文字コード変換のレイヤです。

一方、そのニーズは文字単位で差し替えたいという話なのですから、レイヤが違うのではないでしょうか。

思うに、そのニーズで真に正しい対処は変換表に手をいれることではなく、
DBに保存する前の UTF-8 などの段階でどれかの絵文字に揃える正規化をかけるか、
それぞれの端末向けの文字コードに変換にしたあとで、独自の正規化をかけるのが正解でしょう。

仮にユーザ定義の transcode を用意したとしてもそれは拡張ライブラリになるんですが、
案件ごとに拡張ライブラリを書きたいという話ではないですよね、きっと。

思うに、Perl の Encode のように、変換表をそのままライブラリにし、
変換を呼んだときにコンパイルしてくれるものを想定していると思うのですが、
Ruby のは現状あれとはかなり違うのです。

> 「Ruby標準の絵文字変換で対応できないマニアックな変換は独自の変換ライブラリを
> 作ってね」でも良いのですが、可能であれば
> ・ユーザ定義の絵文字transcoderを作れる余地
> ・fallbackのカスタマイズのように絵文字変換をカスタマイズできる仕組み
> があると助かります。

また、ユーザが独自のエンコーディングや変換ライブラリを追加できるように
することにはわたしが否定的ってのもあります。


結局のところ、変換前、または変換後に同じ文字符号化方式内で文字を入れ替えた方が、
扱いやすさ的にも速度的にもよいと思われるので、そちらを使ってください。
String#tr で不十分ならばユースケースを提供して頂ければより良い方法があるかもしれません。
どうしても変換しながら処理しないと行けないケースがあれば独自変換を考えますが、
絵文字絡みに関してはそれはないと思います。

-- 
NARUSE, Yui
[e-mail]