语义sql转实际sql时，查询条件中的中文会变成Unicode编码

[phsy]

Please confirm before submission 在提交之前，请确认

• I have searched for existing issues search for existing issues, including closed ones.
  我已经搜索了现有问题搜索现有问题，包括已关闭的问题。"

Version 版本

0.7.1

Problem description 问题描述

语义sql转实际sql时，查询条件中的中文会变成Unicode编码，跟踪了一下代码，问题是这个类中：
ai.dat.core.semantic.SemanticSqlConverter
convert(String)方法中，SqlNode sqlNode = ansiSqlParser.parseQuery(semanticSql);获取到的sqlNode里，条件中的中文已经转换成了Unicode编码，但是直到sqlNode2Sql(SqlNode)中转换成实际sql语句后，依然是Unicode编码，并没有转换回来，导致了执行报错。

比如：lower('三公司')变成了LOWER(u&'\4e09\516c\53f8')

[junjiem]

请问你是转什么数据库的方言？目前我这边没法复现你的问题，是否可以告知更多的信息？

[phsy]

用的是项目提供的mysql方言适配器，连接的是starrocks
我使用ai.dat.adapter.mysql.DatMysqlSqlDialect下的main方法测试也是没有问题的，但是实际使用就会有这个问题，原因我也debug了，大概就是我问题中提到的那个，SemanticSqlConverter中进行了sql语法解析，sqlNode中编码问题

[junjiem]

用的是项目提供的mysql方言适配器，连接的是starrocks 我使用ai.dat.adapter.mysql.DatMysqlSqlDialect下的main方法测试也是没有问题的，但是实际使用就会有这个问题，原因我也debug了，大概就是我问题中提到的那个，SemanticSqlConverter中进行了sql语法解析，sqlNode中编码问题

你的语义SQL有什么独特之处吗？转sqlNode都是使用的ANSI SQL 解析器，除了语句的差异我想不到会有其他的不同。

[phsy]

我改造了语义加载方式，用页面来配置语义文件属性，然后发布成yaml存到数据库，DAT运行时从数据加载语义文件。但是这个应该和编码没关系，我问的问题是“三公司有多少统计数据“，这个三公司是另外一张维度表，实际上生成的sql语句除了编码问题，实际上可以执行的，而且结果也正确。
所有的语义文件的model配置的都是实际的表名，没有使用sql

[junjiem]

我改造了语义加载方式，用页面来配置语义文件属性，然后发布成yaml存到数据库，DAT运行时从数据加载语义文件。但是这个应该和编码没关系，我问的问题是“三公司有多少统计数据“，这个三公司是另外一张维度表，实际上生成的sql语句除了编码问题，实际上可以执行的，而且结果也正确。 所有的语义文件的model配置的都是实际的表名，没有使用sql

抱歉，我这边没法复现你的问题，issues先开着，看看是否有其他人有类似的问题。

[phsy]

好吧，我目前的处理方式是在sqlNode2Sql(SqlNode)方法中加上了Unicode逆转义处理，是能解决问题的，但是这种补丁的处理方式感觉不太正规，还是等其他人有同样问题了再看吧