MySql在使用AES_ENCRYPT或者ENCODE加密时,中文乱码问题(数据库正常,在java代码和页面中变成问号乱码)

本文主要是介绍MySql在使用AES_ENCRYPT或者ENCODE加密时,中文乱码问题(数据库正常,在java代码和页面中变成问号乱码),希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

前言:本文章为解决在mysql中使用AES_ENCRYPT、AES_DECRYPT解密时的中文乱码问题。一定注意:数据库端一切正常,在java代码和页面显示中变为问号“”乱码!(不是数据库乱码!!!)

之前做了一个人信息存储的网站,主要是用于存放个人的一些账号信息(比如游戏账号),所有字符集(数据库和java和页面)都已经设置为UTF-8。mysql5.1.49数据库部分存放的诸如账号、密码之类的数据都是明文存放的(只有自己访问,一开始觉得没什么)。后来看到些文章说mysql5.1有漏洞,容易被人攻破从而看到里面的数据。所以想到使用加密的方式存放数据!

然后经过查找资料,最终决定使用mysql中自带的加密、解密函数来将原始数据加密后存入,取出时解密后再把数据拿到后端(Java代码)中进行使用。好处是加解密都在数据库端完成,不影响代码逻辑;坏处是这样做可能会加重数据库的压力。

使用的加密算法为(加密的算子文章中为abc123,实际我的不是这个,为了个人安全嘛~~~并不影响文章阅读啊):

insert into USER_INFO values(HEX(AES_ENCRYPT('中文账号', 'abc123')), HEX(AES_ENCRYPT('中文密码', 'abc123')));

解密算法为:

select AES_DECRYPT(UNHEX(USER_NAME),'abc123') as 'USER_NAME' from USER_INFO;

加解密后再转变为16进制的原因,和加解密本身函数的使用,请参见其他作者的文章:

https://blog.csdn.net/gw5205566/article/details/81083446

再之后,发现数据库执行上述的语句,在navicat中加解密正常,比如:“中文账号”四个汉字加密为:A560B16DC95484329CD82412347B9A72

它解密后在navicat中也正常显示为:“中文账号”。

到此为止,数据库端一切正常!

/************************************分割线****************************************/

但是!

所有信息一旦在页面上展示,中文部分都会变成问号乱码!

然后写了个单元测试,直接在Dao层获取到User对象后,直接控制台输出对象的账号、密码属性,也都是问号乱码!

������������������������

此时的我是无助的、想哭的、懵逼的!

然后我继续查找资料,一无所获,因为:网上都是说数据库端中文乱码问题的,压根没有我这种数据库正常,页面乱码的!

Holly Shit!我自己研究!

然后仔细排查思路:sql中加解密都正常,能正确解密出“中文账号”四个字的中文。那就应该不是单纯的数据库问题了,所以我在java测试代码中,将“中文账号”四个中文的字符串打散成单个字节16进制输出:

e4b8ade69687e8b4a6e58fb7

按UTF-8标准,一个汉字占3个字节,所以上面“中文账号”一共占12个字节。

再将来自数据库的USER_NAME字段数据打散成单个字节,16进制输出:

efbfbdefbfbdefbfbdefbfbdefbfbdefbfbdefbfbdefbfbdefbfbdefbfbdefbfbdefbfbd

在UTF-8规范中,0xefbfbd为所谓的“占位符”,在转码过程中遇到无法转换为UTF-8的字符时,用它来占位代替!

所以首先想到的还是:“是不是某个环节底层还是把中文转换为了非 UTF-8字符集,而导致转换失败”。

然后,搜索mysql相关乱码问题,发现一个大坑!mysql5.3以前老版本,内置的utf8字符是“假的”,不能完全兼容真正的UTF-8编码!!!

解决方案是安装新版mysql数据库,将字符集设置为:“utf8mb4”!我最后安装的是5.7.23,按照下面教程设置了utf8mb4字符集:

https://www.cnblogs.com/liuge36/p/9882785.html

安装设置完毕后,怀着忐忑的心运行代码,玛德不是问号了,变成了其他乱码

“中文账号”四个汉字变为:

中æè´¦å·

………………我忍,我不哭,我不闹。。。

继续排查………………

我觉得至少这组乱码看起来是有意义的,比问号友好很多的!(捂脸哭)

继续用之前的思路,打散成字节16进制输出!

c3a4c2b8c2adc3a6c296c287c3a8c2b4c2a6c3a5c28fc2b7

变成了24个字节!再仔细观察:

正确的16进制:e4b8ade69687e8b4a6e58fb7

变成了:c3a4c2b8c2adc3a6c296c287c3a8c2b4c2a6c3a5c28fc2b7

看出来了吗,正确的数据(基本正确吧。。。)每个字节前面都加了个c3或者c2!

继续分析:“中文账号”4个汉字,编码成UTF-8的12个字节,然后每个字节又被加了个前缀。按我多年的经验,觉得应当是“mysql将结果通过网络发给后端java代码时,代码中错误的认为这组12个字节数据不是正确的转换后的数据,因此再次尝试了utf-8转码!”

换句话说,就是java代码这边接收到这组数据时,认为是12个字节的字符,但不认为是一个整体,所以继续自动按照utf-8的规则把12个字节转换成了24个字节!

所以按此种思路,大体解决方案就是“让java认为这12个字节已经是最终utf-8字符串,无需再处理一遍”!

经过查阅,最终解决方案是:在原有解密出的结果sql语句基础上,再套一层方法,让结果“成为一个整体”!

select CAST(AES_DECRYPT(UNHEX(USER_NAME),'abc123') as char) as 'USER_NAME' from USER_INFO;

上面sql中红色部分,就是使用cast方法,把结果“强行转换为字符串类型”!

最终,打印发现控制台输出正常!页面显示也正常了!

结论:老外对于中文的处理,永远都有坑。只有你想不到,没有不可能!

/********************************分割线***************************************/

最后总结下解决的总体步骤:

一、安装新版mysql(至少5.5以上),将数据库端字符集设置为“utf8mb4”!

二、在查询出的解密字段结果之上,再套一层cast(),让它“成为一个整体”!

这篇关于MySql在使用AES_ENCRYPT或者ENCODE加密时,中文乱码问题(数据库正常,在java代码和页面中变成问号乱码)的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/871269

相关文章

springboot健康检查监控全过程

《springboot健康检查监控全过程》文章介绍了SpringBoot如何使用Actuator和Micrometer进行健康检查和监控,通过配置和自定义健康指示器,开发者可以实时监控应用组件的状态,... 目录1. 引言重要性2. 配置Spring Boot ActuatorSpring Boot Act

使用Java解析JSON数据并提取特定字段的实现步骤(以提取mailNo为例)

《使用Java解析JSON数据并提取特定字段的实现步骤(以提取mailNo为例)》在现代软件开发中,处理JSON数据是一项非常常见的任务,无论是从API接口获取数据,还是将数据存储为JSON格式,解析... 目录1. 背景介绍1.1 jsON简介1.2 实际案例2. 准备工作2.1 环境搭建2.1.1 添加

MySQL中删除重复数据SQL的三种写法

《MySQL中删除重复数据SQL的三种写法》:本文主要介绍MySQL中删除重复数据SQL的三种写法,文中通过代码示例讲解的非常详细,对大家的学习或工作有一定的帮助,需要的朋友可以参考下... 目录方法一:使用 left join + 子查询删除重复数据(推荐)方法二:创建临时表(需分多步执行,逻辑清晰,但会

Java实现任务管理器性能网络监控数据的方法详解

《Java实现任务管理器性能网络监控数据的方法详解》在现代操作系统中,任务管理器是一个非常重要的工具,用于监控和管理计算机的运行状态,包括CPU使用率、内存占用等,对于开发者和系统管理员来说,了解这些... 目录引言一、背景知识二、准备工作1. Maven依赖2. Gradle依赖三、代码实现四、代码详解五

Redis连接失败:客户端IP不在白名单中的问题分析与解决方案

《Redis连接失败:客户端IP不在白名单中的问题分析与解决方案》在现代分布式系统中,Redis作为一种高性能的内存数据库,被广泛应用于缓存、消息队列、会话存储等场景,然而,在实际使用过程中,我们可能... 目录一、问题背景二、错误分析1. 错误信息解读2. 根本原因三、解决方案1. 将客户端IP添加到Re

java如何分布式锁实现和选型

《java如何分布式锁实现和选型》文章介绍了分布式锁的重要性以及在分布式系统中常见的问题和需求,它详细阐述了如何使用分布式锁来确保数据的一致性和系统的高可用性,文章还提供了基于数据库、Redis和Zo... 目录引言:分布式锁的重要性与分布式系统中的常见问题和需求分布式锁的重要性分布式系统中常见的问题和需求

SpringBoot基于MyBatis-Plus实现Lambda Query查询的示例代码

《SpringBoot基于MyBatis-Plus实现LambdaQuery查询的示例代码》MyBatis-Plus是MyBatis的增强工具,简化了数据库操作,并提高了开发效率,它提供了多种查询方... 目录引言基础环境配置依赖配置(Maven)application.yml 配置表结构设计demo_st

如何使用celery进行异步处理和定时任务(django)

《如何使用celery进行异步处理和定时任务(django)》文章介绍了Celery的基本概念、安装方法、如何使用Celery进行异步任务处理以及如何设置定时任务,通过Celery,可以在Web应用中... 目录一、celery的作用二、安装celery三、使用celery 异步执行任务四、使用celery

使用Python绘制蛇年春节祝福艺术图

《使用Python绘制蛇年春节祝福艺术图》:本文主要介绍如何使用Python的Matplotlib库绘制一幅富有创意的“蛇年有福”艺术图,这幅图结合了数字,蛇形,花朵等装饰,需要的可以参考下... 目录1. 绘图的基本概念2. 准备工作3. 实现代码解析3.1 设置绘图画布3.2 绘制数字“2025”3.3

在Ubuntu上部署SpringBoot应用的操作步骤

《在Ubuntu上部署SpringBoot应用的操作步骤》随着云计算和容器化技术的普及,Linux服务器已成为部署Web应用程序的主流平台之一,Java作为一种跨平台的编程语言,具有广泛的应用场景,本... 目录一、部署准备二、安装 Java 环境1. 安装 JDK2. 验证 Java 安装三、安装 mys