48

我正在将一个项目从 Ant 转换为 Maven，并且在处理 UTF-8 字符的特定单元测试时遇到问题。问题是关于以下字符串：

String l_string = "ČäÁÓý\n€řЖжЦ\n№ЯФКЛ";

问题是单元测试失败，因为 String 被读取如下：

?äÁÓý
€????
?????

java 类保存为 UTF-8，我还在 pom.xml 中将构建编码指定为 UTF-8。

这是我的pom.xml的摘录：

...

<properties>
<project.build.sourceEncoding>UTF-8</project.build.sourceEncoding>
</properties>

...

<build>
<plugins>
    <plugin>
        <groupId>org.apache.maven.plugins</groupId>
        <artifactId>maven-compiler-plugin</artifactId>
        <version>3.1</version>
        <configuration>
            <source>1.6</source>
            <target>1.6</target>
            <encoding>${project.build.sourceEncoding}</encoding>
        </configuration>
    </plugin>
    <plugin>
        <artifactId>maven-assembly-plugin</artifactId>
        <version>2.4</version>
        <configuration>
            <descriptorRefs>
                <descriptorRef>jar-with-dependencies</descriptorRef>
            </descriptorRefs>
        </configuration>
    </plugin>
    <plugin>
      <groupId>org.apache.maven.plugins</groupId>
      <artifactId>maven-surefire-plugin</artifactId>
      <version>2.15</version>
    </plugin>
    <plugin>
      <groupId>org.apache.maven.plugins</groupId>
      <artifactId>maven-surefire-report-plugin</artifactId>
      <version>2.15</version>
    </plugin>
 </plugins>
</build>

我在这里错过了什么吗？如果有人可以在这里帮助我，那就太好了。

更新

关于测试代码：

@Test
public void testTransformation()
{

    String l_string = "ČäÁÓý\n€řЖжЦ\n№ЯФКЛ";
    System.out.println( ">>> " + l_string );
     c_log.info( l_string );
    StringBuffer l_stringBuffer = new StringBuffer();
    int l_stringLength = l_string.length();

    String l_fileName = System.getProperty( "user.dir" ) + File.separator + "transformation" + File.separator + "TransformationMap.properties";
    Transformation.init( l_fileName );

    Properties l_props = Transformation.getProps();
    for ( int i = 0; i < l_stringLength; i++ )
    {
        char l_char = l_string.charAt( i );
        int l_intValue = (int) l_char;
        if ( l_intValue <= 255 )
        {
            l_stringBuffer.append( l_char );
        }
        else
        {
            l_stringBuffer.append( l_props.getProperty( String.valueOf( l_char ), "" ) );
        }
    }
    c_log.info( l_stringBuffer.toString() );
    byte[] l_bytes = l_string.getBytes();
    byte[] l_transformedBytes = Transformation.transform( l_bytes );
    assertNotNull( l_transformedBytes );

}

以下逻辑并不真正相关（？），因为在第一次 sysout 之后，前面提到的“？” 打印而不是正确的字符（因此以下测试失败）。也没有使用默认平台编码。

测试根据 TransformationMap.properties 文件对每个字符进行转换，格式如下（仅摘录）：

Ý=Y
ý=y
Ž=Z
ž=z
°=.
€=EUR

应该注意的是，当我使用 Ant 构建项目时，测试运行没有任何问题。

4

5 回答 5

140

我自己找到了一个“解决方案”：

我必须将编码传递给 maven-surefire-plugin，但通常

<encoding>${project.build.sourceEncoding}</encoding>

不工作。我仍然不知道为什么，但是当我将命令行参数传递给插件时，测试会正常工作：

<plugin>
      <groupId>org.apache.maven.plugins</groupId>
      <artifactId>maven-surefire-plugin</artifactId>
      <version>2.15</version>
      <configuration>
        <argLine>-Dfile.encoding=UTF-8</argLine>
      </configuration>
</plugin>

感谢您的所有回复和其他评论！

于 2013-07-16T08:00:04.570 回答
10

  1. 在调试 Unicode 问题时，请确保将所有内容都转换为 ASCII，这样您就可以阅读和理解字符串内部的内容而无需猜测。这意味着您应该使用例如StringEscapeUtilsfrom commons -lang3变成. 这样，您可以确定您看到了，因为控制台无法打印它。你可以区分“”（）和“”（）ä\u00e4?\u0020\u00a0

    在测试用例中，尽早检查输入的转义版本，以确保数据实际上是您所期望的。

    所以上面的代码应该是：

    assertEquals("\u010d\u00e4\u....", escape(l_string));

  2. 确保对文件 I/O 使用正确的编码。永远不要使用 Java 的默认编码，始终使用InputStreamReader/OutputStreamWriter并指定要使用的编码。

  3. POM 看起来是正确的。运行mvn以-X确保它选择正确的选项并使用正确的选项运行 Java 编译器。mvn help:effective-pom也可能有帮助。

  4. 反汇编类文件以检查字符串。Java 将使用?它来表示它无法读取某些内容。

    如果你得到?from System.out.println( ">>> " + l_string );，这意味着代码不是用 UTF-8 编译的，或者源文件可能是用另一种 Unicode 编码（UTF-16 或类似的）保存的。

    另一个问题来源可能是属性文件。确保它是使用 ISO-8859-1 保存的，并且它没有被编译过程修改。

  5. 确保 Maven 实际编译您的文件。用于mvn clean强制完全重新编译。

于 2013-07-15T15:33:09.563 回答
4

您的问题不是源文件的编码（因此是类文件中的字符串），而是问题是System.out'simplicite的编码PrintStream。它使用file.encodingwhich 代表系统编码，这是 Windows 中的 ANSI 代码页。

您必须使用 OEM 代码页设置一个PrintWriter（或者您使用用于此目的的类：Console）。

See also various bugs around this in: http://bugs.java.com/bugdatabase/view_bug.do?bug_id=4153167

于 2014-01-31T03:57:54.720 回答
4

this works for me:

...
 <properties>
        **<project.build.sourceEncoding>ISO-8859-1</project.build.sourceEncoding>
        <project.reporting.outputEncoding>ISO-8859-1</project.reporting.outputEncoding>**
    </properties>
...
  <build>
    <finalName>Project</finalName>

    <sourceDirectory>src</sourceDirectory>
    <plugins>
      <plugin>
        <artifactId>maven-compiler-plugin</artifactId>
        <version>2.3.2</version>
        <configuration>
          <source>1.6</source>
          <target>1.6</target>
          **<encoding>${project.build.sourceEncoding}</encoding>**
        </configuration>
      </plugin>
      <plugin>
        <artifactId>maven-war-plugin</artifactId>
        <version>2.2</version>
        <configuration>
          <warSourceDirectory>WebContent</warSourceDirectory>
        </configuration>
      </plugin>
    </plugins>
  </build>
于 2014-09-18T19:23:40.200 回答
4

I had a really resilient problem of this kind and setting environmental variable

MAVEN_OPTS=-Dfile.encoding=UTF-8

fixed the issue for me.

于 2017-07-18T16:03:13.700 回答