From: Ken Takata Date: 2012-01-15T14:38:09+09:00 Subject: [ruby-dev:45134] [ruby-trunk - Feature #5820] Merge Onigmo to Ruby 2.0 Issue #5820 has been updated by Ken Takata. 私としては、せっかく (?au) を入れたので使えないのはもったいないなと思います。Perlの他にはPythonでも /u 相当が使えることですし需要はあるでしょう。 /u がぶつかる問題は、大文字で /A/U にするとか？ /d は確かに悩ましいですが、/d で 1.9 仕様とするか、1.9 仕様は破棄して /a をデフォルトにする(/d は無し)か、どちらかしかないのではないかと思っています。（/a で 1.9 仕様とするのは \b の挙動を考えると選択肢からは除外したい。） なお、#note-1 のマージ方法だと、enc ディレクトリ以下をコピーしていないため以下の制限があります。 1. Unicode系エンコーディングで、\X, \R が仕様通りに動作しない。（OnigEncodingType にflagsメンバを追加して、それを参照しているため。）（鬼雲新機能） 2. Unicode系エンコーディングで、\p{In_XXX} によるUnicodeブロック名が使えない。（鬼雲新機能） 3. Unicode系エンコーディングで、大文字小文字変換テーブルがUnicode 6.0に対応していない。（鬼雲新機能） 4. Unicode系エンコーディングで、\p{C} が正しくない。（\p{Cn} の範囲が含まれていない。）（Ruby 1.9のバグ） 5. Unicode系エンコーディングで、\p{LC} (\p{Cased_Letter}) が使えない。（鬼雲新機能） 6. Unicode系エンコーディングで、本来は内部実装用の \p{NEWLINE} が使えるようになってしまっている。（鬼車5.9.2のバグ(?)） 7. Unicode系エンコーディングで、なぜか 0x09～0x0d が \p{Print} に含まれている。（鬼車5.9.2のバグ(?)） 8. sjis/euc_jpで、全角アルファベット、キリル文字、ギリシャ文字の大文字小文字同一視検索ができない。（鬼雲新機能） 9. sjis/euc_jpで、\p{Han}, \p{Latin}, \p{Greek}, \p{Cyrillic} が使えない。（鬼雲新機能） 8,9についてはJIS X 0208を基準にしているので、JIS X 0212や0213はどうするのかという課題があります。 tool/enc-unicode.rb (と tool/CaseFolding.py) もマージが必要です。 ---------------------------------------- Feature #5820: Merge Onigmo to Ruby 2.0 https://bugs.ruby-lang.org/issues/5820 Author: Yui NARUSE Status: Assigned Priority: Normal Assignee: Yui NARUSE Category: M17N Target version: 2.0.0 Ruby 1.9 では正規表現エンジンや M17N の基盤として Oniguruma を用いています。 これを 2.0 では Oniguruma の改造版である、k-takata さんの Onigmo に置き換えようという話です。 https://github.com/k-takata/Onigmo/tree/tmp/ruby-2.0.x この取り込みによる影響は以下の通りです。 * 100%互換 (既存のテストが全て無修正で通る) * いくつかの新機能 [ruby-dev:44410] * 正規表現 　 * \K, \R, \X, (?(cond)yes|no), \g<0>, \g<+n>, (?au) 　 * Perl 5.10互換の名前参照（←Rubyには不要でしょう。） * Shift_JIS, EUC-JPで、全角アルファベットなどの大文字小文字同一視検索に対応。 * Shift_JIS, EUC-JPで、\p{Han}, \p{Latin}, \p{Greek}, \p{Cyrillic} に対応。 * 最適化 * 暗黙のアンカーによる最適化を実装。 * http://redmine.ruby-lang.org/issues/3568 で無効化された最適化を再度有効化。 現状は POSIX 文字クラスに非互換があり、それが解決されればマージ可能と認識しています。 -- http://bugs.ruby-lang.org/