Ruby 1.9: как правильно прописать и перебрать многобайтовые строки? - PullRequest
Новая
       32

Ruby 1.9: как правильно прописать и перебрать многобайтовые строки?

55 голосов
/ 16 декабря 2009

Итак, Матц принял решение ограничить upcase и downcase ограничением /[A-Z]/i в рубине 1.9.1.

ActiveSupport::Multibyte давно испытывает большие колебания в корпусе i18n в ruby ​​1.8.x через String#mb_chars.

Однако при попытке под ruby ​​1.9.1 он не работает. Вот простой тестовый сценарий, который я написал, и вывод, который я получаю: 

$ cat test.rb
# encoding: UTF-8

puts("@ #{RUBY_VERSION} " + (__ENCODING__ rescue $KCODE).to_s)
sd, su = "Iñtërnâtiônàlizætiøn", "IÑTËRNÂTIÔNÀLIZÆTIØN"
def ps(u, d, k); puts "%-30s:  %24s / %-24s" % [k, u, d] end
ps sd.upcase, su.downcase, "Plain ruby"

require 'rubygems'; require 'active_support'
ps sd.upcase, su.downcase, "With active_support"
ps sd.mb_chars.upcase.to_s, su.mb_chars.downcase.to_s, "With active_support mb_chars"

$ ruby -KU test.rb
@ 1.8.7 UTF8
Plain ruby                    :  IñTëRNâTIôNàLIZæTIøN / iÑtËrnÂtiÔnÀlizÆtiØn
With active_support           :  IñTëRNâTIôNàLIZæTIøN / iÑtËrnÂtiÔnÀlizÆtiØn
With active_support mb_chars  :  IÑTËRNÂTIÔNÀLIZÆTIØN / iñtërnâtiônàlizætiøn

$ ruby1.9 test.rb
@ 1.9.1 UTF-8
Plain ruby                    :      IñTëRNâTIôNàLIZæTIøN / iÑtËrnÂtiÔnÀlizÆtiØn
With active_support           :      IñTëRNâTIôNàLIZæTIøN / iÑtËrnÂtiÔnÀlizÆtiØn
With active_support mb_chars  :      IñTëRNâTIôNàLIZæTIøN / iÑtËrnÂtiÔnÀlizÆtiØn

Итак, как мне интернационализировать upcase и downcase с ruby ​​1.9.1?

обновление

Я должен добавить, что я также тестировал ActiveSupport из текущих веток рельсов master, 2-3-* и 3-0-unstable на GitHub. Те же результаты.

Ответы [ 3 ]

57 голосов
/ 09 ноября 2013

для всех, кто приходит из Google по ruby upcase utf8: 

> "your problem chars here çöğıü Iñtërnâtiônàlizætiøn".mb_chars.upcase.to_s
=> "YOUR PROBLEM CHARS HERE ÇÖĞIÜ IÑTËRNÂTIÔNÀLIZÆTIØN"

решение заключается в использовании mb_chars.

Документация:

38 голосов
/ 16 декабря 2009

Преобразование регистра зависит от локали и не всегда в оба конца, поэтому Ruby 1.9 не охватывает его (см. здесь и здесь )

гем unicode-util должен соответствовать вашим потребностям.

12 голосов
/ 24 июня 2016

Преобразование дела сложное и зависит от локали. К счастью, Мартин Дюрст добавил полное сопоставление регистров Unicode в Ruby 2.4: 

puts RUBY_DESCRIPTION

sd, su = "Iñtërnâtiônàlizætiøn", "IÑTËRNÂTIÔNÀLIZÆTIØN"
def ps(u, d, k); puts "%-30s:  %24s / %-24s" % [k, u, d] end 
ps sd.upcase,              su.downcase,              "Ruby 2.4 (default)"
ps sd.upcase(:ascii),      su.downcase(:ascii),      "Ruby 2.4 (ascii)"
ps sd.upcase(:turkic),     su.downcase(:turkic),     "Ruby 2.4 (turkic)"
ps sd.upcase(:lithuanian), su.downcase(:lithuanian), "Ruby 2.4 (lithuanian)"
ps "-",                    su.downcase(:fold),       "Ruby 2.4 (fold)"

Выход: 

ruby 2.4.0dev (2016-06-24 trunk 55499) [x86_64-linux]
Ruby 2.4 (default)            :      IÑTËRNÂTIÔNÀLIZÆTIØN / iñtërnâtiônàlizætiøn
Ruby 2.4 (ascii)              :      IñTëRNâTIôNàLIZæTIøN / iÑtËrnÂtiÔnÀlizÆtiØn
Ruby 2.4 (turkic)             :      IÑTËRNÂTİÔNÀLİZÆTİØN / ıñtërnâtıônàlızætıøn
Ruby 2.4 (lithuanian)         :      IÑTËRNÂTIÔNÀLIZÆTIØN / iñtërnâtiônàlizætiøn
Ruby 2.4 (fold)               :                         - / iñtërnâtiônàlizætiøn
...