[ruby-dev:13949] Re: m17n ruby 特に TRON 文字コード

  豊福です。

まつもとさん
>|>>>   m17n_encoding_func_mbclen(enc,func)   あるバイトに続く長さ
>|  m17n.c 見てみました。
>|  「あるバイト」というのはマルチバイト文字の1バイト目のことで
>|いいんでしょうか。
>
> はい。

  ということは、少なくとも
・マルチバイト文字の1バイト目*だけ*からバイト数がわかる
という条件がエンコーディングには要求されるんですね。
（そうなるようなエンコーディングが普通でしょうけど）

>|>>>   m17n_encoding_func_islead(enc,func)   マルチバイト文字の1バイト目か
>|  ２バイト目以降には現れないバイトかどうか（実際には１バイト目
>|でも２バイト目以降に現れる可能性のある値ならダメ）と読んだんで
>|すが合ってますか。
> 
> はい。

  これ、islead で１バイト目であることがすぐわかればラッキーだし
わからなければ文字列先頭から文字の切れ目を調べ直すみたいな使い方
でしょうか。

> たとえば、ワイドTRON文字列をUTF-8エンコーディングする(コード
> ポイントはTRON、エンコーディングスキームはUTF-8)なんてのも可
> 能でしょう。

  この方法も考えたのですが ASCII 以外が圧縮できること以外に m17n
ruby的にメリットはありますか。

  あ、islead があるから、

>|  TRONコードのうち ASCII に対応する（半角幅表示の）コードは
>|１バイトの ASCIIコードに変換して、それ以外は上記のワイドTRON
>|文字にして MSB を立てる、みたいなエンコーディングでもいいんで
>|しょうか。

は、ASCII以外は２バイト目以降も MSB 立ててさらに１バイト目は
１バイト目であることがわかるようにしないといけないですが。
とすると５バイト必要。処理の面倒さは UTF-8 と大差ない？

>  * ASCIIに含まれる文字は1バイトにエンコーディングされる(かつ、
>    コードポイントはASCIIと等しい(当たり前))

  parse.y を少し読んだんですがスクリプトの文字コードに関しては
この ASCIIコンパチであることが必要ですか。

  ところで ruby の m17n化に関するドキュメント（ruby-* ML以外に）
ってありますか。
---
                                豊福
                                [e-mail]