tidbv5.3.1执行analyze报错other error: encoding failed

[Jellybean (李文杰)]

Bug 反馈
清晰准确地描述您发现的问题，提供任何可能复现问题的步骤有助于研发同学及时处理问题
【 TiDB 版本】
Server version: 5.7.25-TiDB-v5.3.1

【 Bug 的影响】
执行analyze报错other error: encoding failed

【可能的问题复现步骤】
该表有约16亿行，一直有数据持续写入。
表的字符集是latin1：
) ENGINE=InnoDB DEFAULT CHARSET=latin1 COLLATE=latin1_bin

该集群：
mysql> show variables like ‘tidb_skip_utf8_check’ ; ±---------------------±------+
| Variable_name | Value |
±---------------------±------+
| tidb_skip_utf8_check | ON |
±---------------------±------+
1 row in set (0.02 sec)

mysql> show variables like ‘tidb_analyze_version’ ;
±---------------------±------+
| Variable_name | Value |
±---------------------±------+
| tidb_analyze_version | 2 |
±---------------------±------+
1 row in set (0.03 sec)

【看到的非预期行为】
analyze报错：ERROR 1105 (HY000): other error: encoding failed
mysql> analyze table MP.pay ;
ERROR 1105 (HY000): other error: encoding failed
mysql>

【期望看到的行为】
执行analyze成功，并正确更新统计信息，使得SQL用到正确索引

【相关组件及具体版本】
v5.3.1

【其他背景信息或者截图】
1.业务方发现SQL变慢，上线查看是索引使用不准确，想analyze 更新统计信息时发现该异常。
2.此问题与 https://github.com/pingcap/tidb/issues/18680 类似，不确定是否真的有关联。

[chao (cc)]

请问能否提供下错误的相关日志，包括 tidb 和 tikv 侧的

[chao (cc)]

另外new_collation开启的情况

SELECT * FROM mysql.tidb WHERE VARIABLE_NAME='new_collation_enabled';

建表的语句也提供下吧

[Jellybean (李文杰)]

@chao

SELECT * FROM mysql.tidb WHERE VARIABLE_NAME=‘new_collation_enabled’;

mysql> SELECT * FROM mysql.tidb WHERE VARIABLE_NAME=‘new_collation_enabled’;
±----------------------±---------------±---------------------------------------------------+
| VARIABLE_NAME | VARIABLE_VALUE | COMMENT |
±----------------------±---------------±---------------------------------------------------+
| new_collation_enabled | False | If the new collations are enabled. Do not edit it. |
±----------------------±---------------±---------------------------------------------------+
1 row in set (0.01 sec)

[Jellybean (李文杰)]

大概率是写入的数据有乱码，

我们采用的解决办法：重建utf8mb4表，统一字符集编码，重导数据