mysql/Java服务端对emoji(utf8mb4编码)的支持有关的问题

2024-02-18 10:18

本文主要是介绍mysql/Java服务端对emoji(utf8mb4编码)的支持有关的问题,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

mysql/Java服务端对emoji(utf8mb4编码)的支持有关的问题


mysql中保存4字节长度的UTF-8字符(例如emoji表情),就需要使用 utf8mb4 字符集。

如果要写入emoji表情(utf8mb4)到mysql,需要应用客户端、客户端到MySQL的连接、以及MySQL实例内部这三者统一,统一使用支持utf8mb4字符集才行。

否则,mysql的jdbc链接驱动mysql-connetoer会抛异常:

java.sql.SQLException: Incorrect string value: '\xF0\x9F\x98\x84],...' for column 'name' at row 1 


mysql server 5.5.3+ 版本才支持utf8mb4。

mysql> select version();

mysql-connector-5.1.13+版本才支持utf8mb4。


mysq配置文件修改,mysql修改字符集:
[client] 
default-character-set = utf8mb4

[mysql] 
default-character-set = utf8mb4
 
[mysqld]

character-set-server = utf8mb4

#collation-server = utf8mb4_unicode_ci    #测试发现可能不用配置

#init_connect=’SET NAMES utf8mb4’       #测试发现可能不用配置

sql_mode='NO_ENGINE_SUBSTITUTION'


重启mysql


mysql> show variables like '%charact%';

+--------------------------+----------------------------+
| Variable_name            | Value                      |
+--------------------------+----------------------------+
| character_set_client     | utf8mb4                    |
| character_set_connection | utf8mb4                    |
| character_set_database   | utf8mb4                    |
| character_set_filesystem | binary                     |
| character_set_results    | utf8mb4                    |
| character_set_server     | utf8mb4                    |
| character_set_system     | utf8                       |
| character_sets_dir       | /usr/share/mysql/charsets/ |
+--------------------------+----------------------------+
8 rows in set (0.01 sec)

必须保证下面几个正确:
character_set_client (客户端来源数据使用的字符集)
character_set_connection (连接层字符集)
character_set_database (当前选中数据库的默认字符集)
character_set_results (查询结果字符集)
character_set_server (默认的内部操作字符集)

客户端链接测试:

#1: 插入后为乱码:3F3F3F3F
set charset utf8;
insert into test_utf8mb4_src values(9,"test", '??'); #??为直接拷贝的表情符号
select hex(url) from test_utf8mb4_src where id=9;

#2: 插入OK, F09F9884
set charset utf8;
insert into test_utf8mb4_src values(9,"test", 0xF09F9884);
select hex(url) from test_utf8mb4_src where id=9;

#3: 插入OK, F09F9884
set charset utf8;
insert into test_utf8mb4_src values(9,"test", UNHEX('F09F9884'));
select hex(url) from test_utf8mb4_src where id=9;

#4: 插入OK, F09F9884
set charset utf8mb4;
insert into test_utf8mb4_src values(9,"test", '??'); #??为直接拷贝的表情符号
select hex(url) from test_utf8mb4_src where id=9;

#5: 插入OK, F09F9884
set charset utf8mb4;
insert into test_utf8mb4_src values(9,"test", 0xF09F9884);
select hex(url) from test_utf8mb4_src where id=9;

#6: 插入OK, F09F9884
set charset utf8mb4;
insert into test_utf8mb4_src values(9,"test", UNHEX('F09F9884'));
select hex(url) from test_utf8mb4_src where id=9;

----------

总结一下:

不同的配置,有不同测试结果。

1.mysql配置如下,写成功&查询hex值正确
#vim /etc/my.conf
[client]
default-character-set = utf8mb4
[mysql]
default-character-set = utf8mb4
[mysqld]
character-set-server = utf8mb4  #会修改@@character_set_server & @@character_set_database,该参数如果不配置成utf8mb4则无法存储


mysql> show variables like '%char%';
+--------------------------------------+----------------------------+
| Variable_name                        | Value                      |
+--------------------------------------+----------------------------+
| character_set_client                 | utf8mb4                    |
| character_set_connection             | utf8mb4                    |
| character_set_database               | utf8mb4                    |
| character_set_filesystem             | binary                     |
| character_set_results                | utf8mb4                    |
| character_set_server                 | utf8mb4                    |
| character_set_system                 | utf8                       |
...
+--------------------------------------+----------------------------+


2.写入会失败
#vim /etc/my.conf

[client]
default-character-set = utf8
[mysql]
default-character-set = utf8
[mysqld]
character-set-server = utf8 #会修改@@character_set_server & @@character_set_database,该参数如果不配置成utf8mb4则无法存储


mysql> show variables like '%char%';
+--------------------------------------+----------------------------+
| Variable_name                        | Value                      |
+--------------------------------------+----------------------------+
| character_set_client                 | utf8                       |
| character_set_connection             | utf8                       |
| character_set_database               | utf8                       |
| character_set_filesystem             | binary                     |
| character_set_results                | utf8                       |
| character_set_server                 | utf8                       |
| character_set_system                 | utf8                       |
...
+--------------------------------------+----------------------------+

3.其他的配置,可能会导致写入虽然成功,但写入的值(查看hex)不正确。例如:

default-character-set = utf8mb4

character-set-server=utf8


这篇关于mysql/Java服务端对emoji(utf8mb4编码)的支持有关的问题的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/720841

相关文章

Mysql虚拟列的使用场景

《Mysql虚拟列的使用场景》MySQL虚拟列是一种在查询时动态生成的特殊列,它不占用存储空间,可以提高查询效率和数据处理便利性,本文给大家介绍Mysql虚拟列的相关知识,感兴趣的朋友一起看看吧... 目录1. 介绍mysql虚拟列1.1 定义和作用1.2 虚拟列与普通列的区别2. MySQL虚拟列的类型2

详解Java如何向http/https接口发出请求

《详解Java如何向http/https接口发出请求》这篇文章主要为大家详细介绍了Java如何实现向http/https接口发出请求,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 用Java发送web请求所用到的包都在java.net下,在具体使用时可以用如下代码,你可以把它封装成一

关于@MapperScan和@ComponentScan的使用问题

《关于@MapperScan和@ComponentScan的使用问题》文章介绍了在使用`@MapperScan`和`@ComponentScan`时可能会遇到的包扫描冲突问题,并提供了解决方法,同时,... 目录@MapperScan和@ComponentScan的使用问题报错如下原因解决办法课外拓展总结@

mysql数据库分区的使用

《mysql数据库分区的使用》MySQL分区技术通过将大表分割成多个较小片段,提高查询性能、管理效率和数据存储效率,本文就来介绍一下mysql数据库分区的使用,感兴趣的可以了解一下... 目录【一】分区的基本概念【1】物理存储与逻辑分割【2】查询性能提升【3】数据管理与维护【4】扩展性与并行处理【二】分区的

MybatisGenerator文件生成不出对应文件的问题

《MybatisGenerator文件生成不出对应文件的问题》本文介绍了使用MybatisGenerator生成文件时遇到的问题及解决方法,主要步骤包括检查目标表是否存在、是否能连接到数据库、配置生成... 目录MyBATisGenerator 文件生成不出对应文件先在项目结构里引入“targetProje

C#使用HttpClient进行Post请求出现超时问题的解决及优化

《C#使用HttpClient进行Post请求出现超时问题的解决及优化》最近我的控制台程序发现有时候总是出现请求超时等问题,通常好几分钟最多只有3-4个请求,在使用apipost发现并发10个5分钟也... 目录优化结论单例HttpClient连接池耗尽和并发并发异步最终优化后优化结论我直接上优化结论吧,

SpringBoot使用Apache Tika检测敏感信息

《SpringBoot使用ApacheTika检测敏感信息》ApacheTika是一个功能强大的内容分析工具,它能够从多种文件格式中提取文本、元数据以及其他结构化信息,下面我们来看看如何使用Ap... 目录Tika 主要特性1. 多格式支持2. 自动文件类型检测3. 文本和元数据提取4. 支持 OCR(光学

Java内存泄漏问题的排查、优化与最佳实践

《Java内存泄漏问题的排查、优化与最佳实践》在Java开发中,内存泄漏是一个常见且令人头疼的问题,内存泄漏指的是程序在运行过程中,已经不再使用的对象没有被及时释放,从而导致内存占用不断增加,最终... 目录引言1. 什么是内存泄漏?常见的内存泄漏情况2. 如何排查 Java 中的内存泄漏?2.1 使用 J

JAVA系统中Spring Boot应用程序的配置文件application.yml使用详解

《JAVA系统中SpringBoot应用程序的配置文件application.yml使用详解》:本文主要介绍JAVA系统中SpringBoot应用程序的配置文件application.yml的... 目录文件路径文件内容解释1. Server 配置2. Spring 配置3. Logging 配置4. Ma

MySQL中时区参数time_zone解读

《MySQL中时区参数time_zone解读》MySQL时区参数time_zone用于控制系统函数和字段的DEFAULTCURRENT_TIMESTAMP属性,修改时区可能会影响timestamp类型... 目录前言1.时区参数影响2.如何设置3.字段类型选择总结前言mysql 时区参数 time_zon