关于Mysql表中使用‘utf8mb4_unicode_ci’字符集问题

2024-03-24 17:20

本文主要是介绍关于Mysql表中使用‘utf8mb4_unicode_ci’字符集问题,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

业务场景:需求点项目excel数据导入,会对重复名称校验拦截,如:之前已插入名称为-半角括号“(a)”,再次插入一条名称为-全角括号项目“(a)”,校验通过,但是插入数据库报错。

原因:由于数据库默认忽略括号全角、半角,导致一条数据代码数据校验通过,但插入数据唯一键冲突。

如果使用的数据库是‘utf8mb4_unicode_ci’,在数据库层面通过SQL进行排序、对比操作时,会忽略全角、半角、大小写区分,如在代码中进行排序和对比操作,需求考虑逻辑的一致性。

MySQL数据库中utf8mb4_unicode_ci字符集的特性

1. utf8mb4_unicode_ci字符集概述

utf8mb4_unicode_ci是MySQL中的一种字符集和排序规则(collation)。utf8mb4表示能够支持最多4个字节的UTF-8编码,这使得它能够存储任何Unicode字符,包括表情符号等。_ci后缀表示case-insensitive(不区分大小写)。

2. 不区分全角/半角和大小写的原因

utf8mb4_unicode_ci字符集在比较字符时,不区分全角/半角和大小写,主要基于以下原因:

  • Unicode标准utf8mb4_unicode_ci的排序规则基于Unicode标准,该标准旨在统一字符表示,以便跨语言和地区兼容。在Unicode标准中,全角和半角字符可能被认为是等价的变体。

  • 不区分大小写_ci后缀意味着在排序和比较时不区分大小写。这是为了支持那些不区分大小写的语言环境,使得数据库能更通用和灵活。

  • 国际化和本地化:不区分全角/半角和大小写可以让数据库更好地适应国际化和本地化的需求,因为不同的语言和地区可能对字符的处理有不同的要求。

3. 对数据库设计的影响

在设计数据库时,需要考虑到这些特性,特别是当你的应用程序需要区分全角/半角或大小写时。在这种情况下,你可能需要:

  • 选择不同的排序规则:选择一个区分大小写或全角/半角的排序规则,如utf8mb4_bin,它是二进制的,会区分字符的所有差异。

  • 自定义排序规则:如果没有现成的排序规则满足需求,可能需要自定义排序规则。

  • 应用层处理:在某些情况下,可能需要在应用程序层面上进行字符处理,以确保全角/半角和大小写的正确处理。

总结

utf8mb4_unicode_ci字符集不区分全角/半角和大小写,这是基于Unicode标准和国际化需求设计的。在需要区分这些差异的场景中,可能需要选择或自定义不同的排序规则,或者在应用层面上进行处理,以确保数据的准确性和一致性。

这篇关于关于Mysql表中使用‘utf8mb4_unicode_ci’字符集问题的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/842248

相关文章

SQL中的外键约束

外键约束用于表示两张表中的指标连接关系。外键约束的作用主要有以下三点: 1.确保子表中的某个字段(外键)只能引用父表中的有效记录2.主表中的列被删除时,子表中的关联列也会被删除3.主表中的列更新时,子表中的关联元素也会被更新 子表中的元素指向主表 以下是一个外键约束的实例展示

基于MySQL Binlog的Elasticsearch数据同步实践

一、为什么要做 随着马蜂窝的逐渐发展,我们的业务数据越来越多,单纯使用 MySQL 已经不能满足我们的数据查询需求,例如对于商品、订单等数据的多维度检索。 使用 Elasticsearch 存储业务数据可以很好的解决我们业务中的搜索需求。而数据进行异构存储后,随之而来的就是数据同步的问题。 二、现有方法及问题 对于数据同步,我们目前的解决方案是建立数据中间表。把需要检索的业务数据,统一放到一张M

如何去写一手好SQL

MySQL性能 最大数据量 抛开数据量和并发数,谈性能都是耍流氓。MySQL没有限制单表最大记录数,它取决于操作系统对文件大小的限制。 《阿里巴巴Java开发手册》提出单表行数超过500万行或者单表容量超过2GB,才推荐分库分表。性能由综合因素决定,抛开业务复杂度,影响程度依次是硬件配置、MySQL配置、数据表设计、索引优化。500万这个值仅供参考,并非铁律。 博主曾经操作过超过4亿行数据

中文分词jieba库的使用与实景应用(一)

知识星球:https://articles.zsxq.com/id_fxvgc803qmr2.html 目录 一.定义: 精确模式(默认模式): 全模式: 搜索引擎模式: paddle 模式(基于深度学习的分词模式): 二 自定义词典 三.文本解析   调整词出现的频率 四. 关键词提取 A. 基于TF-IDF算法的关键词提取 B. 基于TextRank算法的关键词提取

使用SecondaryNameNode恢复NameNode的数据

1)需求: NameNode进程挂了并且存储的数据也丢失了,如何恢复NameNode 此种方式恢复的数据可能存在小部分数据的丢失。 2)故障模拟 (1)kill -9 NameNode进程 [lytfly@hadoop102 current]$ kill -9 19886 (2)删除NameNode存储的数据(/opt/module/hadoop-3.1.4/data/tmp/dfs/na

Hadoop数据压缩使用介绍

一、压缩原则 (1)运算密集型的Job,少用压缩 (2)IO密集型的Job,多用压缩 二、压缩算法比较 三、压缩位置选择 四、压缩参数配置 1)为了支持多种压缩/解压缩算法,Hadoop引入了编码/解码器 2)要在Hadoop中启用压缩,可以配置如下参数

Makefile简明使用教程

文章目录 规则makefile文件的基本语法:加在命令前的特殊符号:.PHONY伪目标: Makefilev1 直观写法v2 加上中间过程v3 伪目标v4 变量 make 选项-f-n-C Make 是一种流行的构建工具,常用于将源代码转换成可执行文件或者其他形式的输出文件(如库文件、文档等)。Make 可以自动化地执行编译、链接等一系列操作。 规则 makefile文件

好题——hdu2522(小数问题:求1/n的第一个循环节)

好喜欢这题,第一次做小数问题,一开始真心没思路,然后参考了网上的一些资料。 知识点***********************************无限不循环小数即无理数,不能写作两整数之比*****************************(一开始没想到,小学没学好) 此题1/n肯定是一个有限循环小数,了解这些后就能做此题了。 按照除法的机制,用一个函数表示出来就可以了,代码如下

hdu1043(八数码问题,广搜 + hash(实现状态压缩) )

利用康拓展开将一个排列映射成一个自然数,然后就变成了普通的广搜题。 #include<iostream>#include<algorithm>#include<string>#include<stack>#include<queue>#include<map>#include<stdio.h>#include<stdlib.h>#include<ctype.h>#inclu

性能分析之MySQL索引实战案例

文章目录 一、前言二、准备三、MySQL索引优化四、MySQL 索引知识回顾五、总结 一、前言 在上一讲性能工具之 JProfiler 简单登录案例分析实战中已经发现SQL没有建立索引问题,本文将一起从代码层去分析为什么没有建立索引? 开源ERP项目地址:https://gitee.com/jishenghua/JSH_ERP 二、准备 打开IDEA找到登录请求资源路径位置