要使JavaCC能够处理中文首先需要将语法描述文件的options块的UNICODE_INPUT选项设置为true:
options {
STATIS = false;
DEBUG_PARSER = true;
UNICODE_PARSER = true;
JDK_VERSION = "1.8";
}
这样就会先将输入的字符转换成UNICODE后再进行处理。UNICODE_INPUT选项为false时只能处理ASCII范围的字符。
另外还需要使用第2、3种构造方法为输入的字符串设置适当的编码。