Unicode Clojure модульный тестовый вывод - PullRequest
Новая
       10

Unicode Clojure модульный тестовый вывод

6 голосов
/ 30 января 2011

При модульном тестировании некоторого кода, который переводит последовательности ascii в символы Unicode, я обнаружил проблему с выводом тестов Clojure.

Я проверил, что мой терминал может выводить символы Unicode (путем проверки тестафайлы), и это работает нормально, поэтому проблема, похоже, связана с leiningen, Clojure или clojure.test.

Вот пример теста (с использованием греческого раздела юникода - я также буду использовать расширенный греческий язык, но я предполагаю, чтобудут применяться те же проблемы): 

(deftest bc-string-w-comma
  (is (= "αβγ, ΑΒΓ" (parse "abg,*a*b*g"))))

Это означает сбой из-за отсутствия места на входе.Вывод lein test следующий: 

Testing parse_perseus.test.betacode
FAIL in (bc-string-w-comma) (betacode.clj:15)
expected: (= "???, ???" (parse "abg,*a*b*g"))
  actual: (not (= "???, ???" "???,???"))
Testing parse_perseus.test.core
Testing parse_perseus.test.pluralise
Ran 10 tests containing 59 assertions.
1 failures, 0 errors.

Что я здесь не так делаю?Это проблема эмуляции терминала или что-то вроде clojure?У меня та же проблема при запуске кода в REPL с Slime / swank / emacs.REPL в emacs выводит только вопросительные знаки для вывода в Unicode (хотя emacs вполне способен понимать Unicode).

Я попытался запустить это в Terminal и iTerm (OS X) с теми же результатами.

Ответы [ 2 ]

6 голосов
/ 31 января 2011

Оказывается, вы можете передать опции в java, чтобы принудительно установить выходную кодировку *out*, чтобы Юникод работал, например так: 

java -Dfile.encoding=utf-8 -cp lib/clojure-1.2.0.jar:lib/clojure-contrib-1.2.0.jar clojure.main -i src/whatever.clj

Поскольку я использую Leiningen, я добавил это свойство в свой файл project.clj: 

(defproject project_name "1.0.0-SNAPSHOT"
  :description "A Clojure Project"
  :dependencies [[org.clojure/clojure "1.2.0"]
                 [org.clojure/clojure-contrib "1.2.0"]]
  :dev-dependencies [[swank-clojure "1.2.0"]]
  :jvm-opts ["-Dfile.encoding=utf-8"])
2 голосов
/ 30 января 2011

Само Clojure кажется открытым (это Ubuntu 10.10, gnome-терминал, OpenJDK): 

john@woc-desktop$ java -cp /home/john/.m2/repository/org/clojure/clojure/1.2.0/clojure-1.2.0.jar:/home/john/.m2/repository/org/clojure/clojure-contrib/1.2.0/clojure-contrib-1.2.0.jar clojure.main
Clojure 1.2.0
user=> (use 'clojure.test)
nil
user=> (defn parse [s] "αβγ,ΑΒΓ")
#'user/parse
user=> (deftest greek (is (= "αβγ, ΑΒΓ" (parse ""))))
#'user/greek
user=> (run-tests)

Testing user

FAIL in (greek) (NO_SOURCE_FILE:3)
expected: (= "αβγ, ΑΒΓ" (parse ""))
  actual: (not (= "αβγ, ΑΒΓ" "αβγ,ΑΒΓ"))

Ran 1 tests containing 1 assertions.
1 failures, 0 errors.
{:type :summary, :test 1, :pass 0, :fail 1, :error 0}
user=>

Но это ломает emacs / swank / clojure-maven-plugin / maven

при REPL в emacs: 

> (is "αβγ""αβγ")

slime-net-send: Coding system iso-latin-1-unix not suitable for "000052(:emacs-rex (swank:listener-eval \"(is \\\"αβγ\\\"\\\"αβγ\\\")

\") \"user\" :repl-thread 33)
"

Если я использую maven, простой файл pom ниже и mvn clojure: repl, тогда все в порядке: 

[INFO] [clojure:repl {execution: default-cli}]
Clojure 1.2.0
user=> (use 'clojure.test) (is "αβγ""αβγ")
nil
"αβγ"
user=> (defn parse [s] "αβγ,ΑΒΓ")
#'user/parse
user=> (deftest greek (is (= "αβγ, ΑΒΓ" (parse ""))))
#'user/greek
user=> (run-tests)

Testing user

FAIL in (greek) (NO_SOURCE_FILE:3)
expected: (= "αβγ, ΑΒΓ" (parse ""))
  actual: (not (= "αβγ, ΑΒΓ" "αβγ,ΑΒΓ"))

Ran 1 tests containing 1 assertions.
1 failures, 0 errors.
{:type :summary, :test 1, :pass 0, :fail 1, :error 0}
user=>

но если я добавлю библиотеку jline, используя этот фрагмент: 

<dependency>
  <groupId>jline</groupId>
  <artifactId>jline</artifactId>
  <version>0.9.94</version>
</dependency>

тогда я получаю: 

[INFO] [clojure:repl {execution: default-cli}]
[INFO] Enabling JLine support
Clojure 1.2.0
user=> (use 'clojure.test) (is "αβγ""αβγ")
nil
"���"
user=> (defn parse [s] "αβγ,ΑΒΓ")
#'user/parse
user=> (deftest greek (is (= "αβγ, ΑΒΓ" (parse ""))))
#'user/greek
user=> (run-tests)

Testing user

FAIL in (greek) (NO_SOURCE_FILE:3)
expected: (= "���, ���" (parse ""))
  actual: (not (= "���, ���" "���,���"))

Ran 1 tests containing 1 assertions.
1 failures, 0 errors.
{:type :summary, :test 1, :pass 0, :fail 1, :error 0}
user=>

Что ужасно похоже на твою ошибку. Таким образом, возможно, проблема в jLine, или в какой-то другой части, общей для Leiningen и maven, которая связана с jLine.

Или, конечно, могут быть две независимые ошибки, связанные с юникодом.

Вот мой файл maven pom.xml на случай, если кто-нибудь попытается отладить его. 

<project>

  <modelVersion>4.0.0</modelVersion>
  <groupId>com.aspden</groupId>
  <artifactId>maven-clojure-simple</artifactId>
  <version>1.0-SNAPSHOT</version>
  <name>maven-clojure-simple</name>
  <description>maven, clojure: simple project</description>

  <repositories>

    <repository>
      <id>clojure</id>
      <url>http://build.clojure.org/releases</url>
    </repository>
    <repository>
      <id>central</id>
      <url>http://repo1.maven.org/maven2</url>
    </repository>
  </repositories>

  <dependencies>
    <dependency>
      <groupId>org.clojure</groupId>
      <artifactId>clojure</artifactId>
      <version>1.2.0</version>
    </dependency>
  </dependencies>

  <build>
    <plugins>
      <plugin>
    <groupId>com.theoryinpractise</groupId>
    <artifactId>clojure-maven-plugin</artifactId>
    <version>1.3.5-SNAPSHOT</version>
      </plugin>
    </plugins>
  </build>

</project>

Я ценю, что это не ответ, но я подумал, что это может быть полезно.

...