ICode9

精准搜索请尝试: 精确搜索
首页 > 数据库> 文章详细

Sqoop报错:Caused by: java.sql.BatchUpdateException: Incorrect string value: '\xF0\xA4\x8F\x81

2022-04-22 17:04:25  阅读:294  来源: 互联网

标签:Incorrect x81 jdbc java 报错 MysqlIO mysql com emoji


sqoop从hive导出到mysql报错如下:

Caused by: java.sql.SQLException: Incorrect string value: '\xF0\xA4\x8F\x81' for column 'role_name' at row 68
	at com.mysql.jdbc.SQLError.createSQLException(SQLError.java:964)
	at com.mysql.jdbc.MysqlIO.checkErrorPacket(MysqlIO.java:3973)
	at com.mysql.jdbc.MysqlIO.checkErrorPacket(MysqlIO.java:3909)
	at com.mysql.jdbc.MysqlIO.sendCommand(MysqlIO.java:2527)
	at com.mysql.jdbc.MysqlIO.sqlQueryDirect(MysqlIO.java:2680)
	at com.mysql.jdbc.ConnectionImpl.execSQL(ConnectionImpl.java:2487)
	at com.mysql.jdbc.PreparedStatement.executeInternal(PreparedStatement.java:1858)
	at com.mysql.jdbc.PreparedStatement.executeUpdateInternal(PreparedStatement.java:2079)
	at com.mysql.jdbc.PreparedStatement.executeBatchSerially(PreparedStatement.java:1756)
	... 3 more

    

发现字段中有emoji表情无法导入mysql问题解决;

在使用MySQL的过程中,可能会出现初始设计使用的字符集或Collation不符合当前需求的情况。如使用utf8的表(MySQL中的utf8即utf8mb3)要支持emoji,

而utf8mb3不支持emoji(emoji需要4个字节,而utf8mb3最长只支持3个字节),所以需要将字符集修改为utf8mb4。(更改后需要重启数据库,待测。。。

  

建表示例如下:

mysql> SHOW CREATE TABLE test_table;
+------------+----------------------------------------------------------------------------------------------------------------+
| Table      | Create Table                                                                                                   |
+------------+----------------------------------------------------------------------------------------------------------------+
| test_table | CREATE TABLE `test_table` (
  `id` int(11) NOT NULL,
  PRIMARY KEY (`id`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 |
+------------+----------------------------------------------------------------------------------------------------------------+
1 row in set (0.00 sec)

   

如果还是不能解决,则需要查看sqoop中的jar包是否支持utf8mb4编码符。 若是不支持,则需要更改jar包。

注;mysql的版本不能太低,低于5.5.3的版本不支持utf8mb4编码。

查看mysql是否支持(maxlen表示存储的最大字节数):

 

 

 

参考:MySQL查看、修改字符集及Collation

再见乱码:5分钟读懂MySQL字符集设置 

mysql存入表情符号emoji MYSQL: Caused by: java.sql.SQLException: Incorrect string value

sqoop导入数据至mysql时,emoji表情无法导入mysql问题解决

标签:Incorrect,x81,jdbc,java,报错,MysqlIO,mysql,com,emoji
来源: https://www.cnblogs.com/-courage/p/16179557.html

本站声明: 1. iCode9 技术分享网(下文简称本站)提供的所有内容,仅供技术学习、探讨和分享;
2. 关于本站的所有留言、评论、转载及引用,纯属内容发起人的个人观点,与本站观点和立场无关;
3. 关于本站的所有言论和文字,纯属内容发起人的个人观点,与本站观点和立场无关;
4. 本站文章均是网友提供,不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属;如您发现该文章侵犯了您的权益,可联系我们第一时间进行删除;
5. 本站为非盈利性的个人网站,所有内容不会用来进行牟利,也不会利用任何形式的广告来间接获益,纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。

专注分享技术,共同学习,共同进步。侵权联系[81616952@qq.com]

Copyright (C)ICode9.com, All Rights Reserved.

ICode9版权所有