ruby-list

たむらです。

On Sat, 18 Jan 2003 18:47:03 +0900
Take_tk <ggb03124@nifty.ne.jp> wrote:

> たけ(tk)です。
> 
> [ruby-list:36958] Re: Unicode 対応の nkfは？ にて 
> nobu.nakada@nifty.ne.jp さん 曰く:
> : > 「utf-8 の取り扱えるnkf」というのはrubyで採用されるのでしょうか？
> : > 
> : > http://sourceforge.jp/forum/forum.php?forum_id=1038
> : > http://www.ie.u-ryukyu.ac.jp/~kono/nkf/
> : 
> : roughにはunkfが入ってます。標準にいつ入るかは分かりませんが、
> : nkf自体の状況次第なのかも。
> 
> 　去年の9月にバグフィックス版のnkf 2.0.1が出ていて、その後の音沙汰は分か
> りませんが、まだバグだしの最中なのでしょうか？
> 　安定しているから音沙汰なしなのか？？

nkf-unicode 対応版メンテナのたむらです。

 * 最新版の nkf-2.0.1 対応をしてない
 * NKF::guess の UTF-8対応をどうするのか
 * nkf-2x自体が UTF-8 に続いて UTF-16対応もする予定だが、どう扱うか

などのため、ペンディングといったところです。
特に、NKF::guess は深刻で、そもそも nkfはライブラリとしての利用を考慮してないため
文字コード判別ルーチンが提供されてないのです。現行では ext/nkf/nkf.c を見れば判りますが
/*
 * Character code detection - Algorithm described in:
 * Ken Lunde. `Understanding Japanese Information Processing'
 * Sebastopol, CA: O'Reilly & Associates.
 */ 
ということで、独自に EUC/SJIS/JIS判定ルーチンが入っており、これの UTF-8対応が問題なわけです。
最近ひさしぶりに、lvとかRuby/lv とか見てて、guess()相当を作ってみたりしてますが、
これを採用するか
どうかは、未定なのです。

そういえば、MoonWolfさんの判定ルーチンってもらえないかしら。

# 一番の原因は、たむらの怠慢です。済みません。

変換ルーチン自体は安定してると思われます。自分でも使ってるし。

-- 

たむら (http://tamura.tdiary.net)

Thread

Prev Next

In This Thread

Prev Next

[#36889] [ANN] Exerb/Exerb-CC 2.5.0 — Yuya Kato <yuya-ml@4th.to>

[#36890] [ANN] RAA/2.2 — "U.Nakamura" <usa@...>

[#36892] Simple SNMP Library(s2nmp) — "Sadayuki Sakamoto" <sakacom@...>

[#36897] [ANN]RDE0.9.9.1差分公開 — sakazuki <QZS01353@...>

[#36899] シグナルのtrapについて — sakazuki <QZS01353@...>

[#36904] 関西Ruby新年会 2003 — "U.Nakamura" <usa@...>

[#36910] [ANN] Ruby-GetText-Package-0.5.0 — Masao Mutoh <mutoh@...>

[#36911] ANN: RHG読書会(東京編) ML — TAKAHASHI Masayoshi <maki@...>

[#36912] Numeric#bankers_round — Take_tk <ggb03124@...>

[#36913] Complex#round — Take_tk <ggb03124@...>

[#36915] Numeric#round_to — Take_tk <ggb03124@...>

[#36920] [ANN] WebUnit(改) is WebUnit added supporting Test::Unit and REXML — Kouhei Sutou (須藤功平) <kou@...>

[#36922] [ANN] Exerb/Exerb-CC 2.5.1 — Yuya Kato <yuya-ml@4th.to>

[#36923] Re: [ANN] WebUnit(改) is WebUnit added supporting Test::Unit and REXML — 成島 寛則 <narushima@...>

[#36924] vruby030101が何か変 — Mitsuo Igarashi <mitsu5@...>

[#36934] vruby call_parenthandler — Mitsuo Igarashi <mitsu5@...>

[#36936] FormDesigner について — Masahiro Kitajima <katonbo@...>

[#36938] ruby 1.8.0 で __END__ が使えない？ — ABE Shigeru <shiger-a@...>

[#36940] include した定数に対する defined? — ABE Shigeru <shiger-a@...>

[#36945] Arrayの判定 — Nonta <nonta@...>

[#36948] matrix,rbのVector — Yoshiyasu Kaneshige <hien@...>

[#36955] JIS符号化ライブラリ — Satoshi Osabe <s-osabe@...>

[#36957] Unicode 対応の nkf は？ — Take_tk <ggb03124@...>

[#36966] 呼び出し関数名を取得するには? — Masahiro SAITO <m-saito@...4.so-net.ne.jp>

[#36971] ERB2 bug? — MoonWolf <moonwolf@...>

[#36983] ２つの絶対パスから相対パスを求めるライブラリ — Narushima Hironori <narushima_to@...>

[#36988] create class function from Module — "Oliver M. Bolzer" <oliver@...>

[#36993] — "unchained@..." <unchainedcity@...>

[#36994] 正規表現「^」の動作 — Nonta <nonta@...>

[#37001] CGIで画像のサイズ変更をしたい。 — FUJIOKA Takeyuki <fuji@...>

[#37005] ruby-1.8.0 mingw build 失敗 — Mitsuo Igarashi <mitsu5@...>

[#37008] win2000server+rbcw164jでCGIエラー — Misawa Shinobu <misawa@...>

[#37016] RAA short descriptions — "NAKAMURA, Hiroshi" <nakahiro@...>

[#37017] [UPDATE] letmesee-1.0 — Kazuhiko <kazuhiko@...>

[#37018] [ANN]w3m/Plucker 0.3リリース — rubikitch <rubikitch@...>

[#37019] [ANN]rd2html-ext 0.1.3 リリース — rubikitch <rubikitch@...>

[#37021] [RAA] RAA/2.3 — "U.Nakamura" <usa@...>

[#37025] [ANN] irbsh 0.9.0リリース — rubikitch <rubikitch@...>

[ruby-list:36964] Re: Unicode対応の nkfは？

Thread

In This Thread

[#36923] Re: [ANN] WebUnit(改) is WebUnit added supporting Test::Unit and REXML — 成島寛則 <narushima@...>

[#36938] ruby 1.8.0 で END が使えない？ — ABE Shigeru <shiger-a@...>