24 碰到的一个 idea的奇怪的编码问题

2024-05-28 15:38
文章标签 问题 idea 碰到 编码 24 奇怪

本文主要是介绍24 碰到的一个 idea的奇怪的编码问题,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

以下为日记内容, 实质记录是发生在昨天, 08.09

咦, 现在的文档下载都至少需要 1个积分了吗, 之前的那些免费的文档似乎也被csdn控制成了需要1积分下载了 

--------------------------------------------------

今天 晚上 idea 遇到了一个编码问题 我不太明白, 说一下环境吧
idea 启动程序编码[-Dfile.encoding]默认是 utf-8, 然后 测试程序文件的编码 是gbk, 然后 System.out.println 出来[debug的结果也是一样]的结果为 该字符串的 gbk编码之后 utf-8解码的乱码 "���"
这个倒是正常的瑟, 文件写入以 gbk 写入, 然后 以utf-8读出 乱码, 然后 之后的时候, 我在测试程序配置了一下启动参数 -Dfile.encoding=gbk, 然后 妈的 返现输出 还是乱码 "???"
然后 之后的时候, 我就把 idea的 jvm 配置增加了 -Dfile.encoding=gbk, ## 这时候, 原来是 gbk 的文件, 不知为何idea突然 换成了以 utf-8 加载, 然后 我以gbk编码reload了一下, 正常了, 
然后 继续跑, 然后 发现, 还是 以gbk编码之后 utf-8解码的乱码 "���", 然后 之后 再启动测试程序配置了一下启动参数 -Dfile.encoding=gbk, 然后 还是 "???"


然后 就在我放弃的时候, 我删掉了 idea 的jvm配置 -Dfile.encoding, 然后 删掉了测试程序的 -Dfile.encoding, 然后 跑了一下, 我去 居然又好了, 真是奇怪
然后 我想了一下, 可能存在的原因, 可能是因为 我的项目是 gbk 编码嘛, 然后 但是存在部分文件是 utf-8 编码, 然后 在决策以什么编码编译的时候, 编译器可能以utf-8读取的文件, 但是 为什么测试程序 配置了 -Dfile.encoding=gbk, 然后 读取到的数据 仍然是乱码, 这个 我就不知道了[因为根本与 file.encoding的配置没有关系]
然后  我尝试证实一下这个猜想, 然后 更新了一下 外部的一个文件的编码, 以及 req_dto包下面的一个文件的编码, 更新为 utf-8, 然后 发现, 我的猜想是错的 !


java编译器编码和JVM编码问题?

https://www.zhihu.com/question/30977092/answer/50182545

然后 看了一下 R大的这篇文章, 我觉得问题可能实在 编译器编译的时候的编码, 可能在第一次进来的时候 和最后一次运行的时候, 可能是读取源码文件的时候编码可能不一致吧, 可能前者使用 utf-8读取的源码, 然后 后者以gbk读取的文件, 然后 执行的时候, 因为字节码规范约定的字符串以utf-8存储, 然后 jvm读取字节码的时候 以utf-8读取字符串[偏离了这里的问题之外]
问题的出现的原因
-----
这个 问题, 还得想想, 说不定 可以写出一篇博客, 如果能够重现问题就好了, 
哦, 说一下 问题的出现的吧, 首先是 我创建了一个 train_dto 的包, 然后 吧train相关的 reqdto 拷贝进来了, 文件格式是 utf-8m, 
然后 其余的大部分文件时 gbk, 外围的 test03 还有几个utf-8的文件, 然后 新建了一个 gbk 的 Test27GenerateXYJParamSql, 然后 跑的时候, 就出现了 这个问题,


源码的编码[gbk] - 编译器读取文件的编码
在之前存在乱码问题, 在之后增加 -Dfile.encoding idea配置选项, 然后又删除, 重启之后不存在乱码
源码的编码[utf-8] - 编译器读取文件的编码
吧 Test29OutputChinese 编码变成 utf-8, 然后 输出的结果 为 "浣犲ソ"[utf-8, gbk]
测试程序 源码 gbk, 加上-Dfile.encoding=gbk, 之后 str.getBytes("gbk"), "utf-8") 为 "???" [这个输出不一样, 可能是与System.out的输出编码有关系]
## 哦, 对了, 还有一个 编码是 System.out.println 编码, 但是 不应该是这个, 毕竟 debug 调试的时候, 字符串就已经是 乱码了,

哦, 对了 吧 Test29OutputChinese 编码变成 utf-8, 然后 javac -p 给定的字节码文件, 得到的结果 是"浣犲ソ"的乱码, 然后 文件如果是 gbk编码写出, 则是正常的 "你好", 因此, 可以推测出 javac 的读取源码的编码是 使用的编码是 gbk[也就是 R大回答的如果编译的时候 没有指定-encoding 读取平台默认编码, 我这里的默认编码为 gbk]

--------------------------------------------------
然后 加上 -Dfile.encoding=gbk, 字节码中得到的是正常的 "你好", 然后 str.getBytes("gbk") 得到的是 [-60,  -29,  -70,  -61]
加上 -Dfile.encoding=utf-8, 字节码中得到的是正常的 "你好", 然后 str.getBytes("gbk") 得到的是 [-60,  -29,  -70,  -61]
调试 上面的两个 -Dfile.encoding, 在 StringCoding. decode(byte[] ba, int off, int len) 末尾, 两个得到的结果是一致的 !
然后 看两个字符串包装的 char数组, 发现他们的数据 也是一样的, 然后 这里的输出不一样, 可能是与 System.out 的输出编码有关系[强调了三次]
在上面两个 -Dfile.encoding 调试的时候, 我去 jvm 还崩溃了一次, 在 StringCoding. decode(byte[] ba, int off, int len) 之后
然而 直接 run as 却没事,,. 我去 这是什么情况, 现在 不知为何, 只要 已在 String.class 中打断点, 一下就崩溃了[前几次调试都还行, 后来不知怎么的就挂了],, 不论哪一种 -Dfile.encoding

#
# A fatal error has been detected by the Java Runtime Environment:
#
#  EXCEPTION_ACCESS_VIOLATION (0xc0000005) at pc=0x00000000512142b9, pid=51568, tid=51764
#
# JRE version: Java(TM) SE Runtime Environment (7.0_40-b43) (build 1.7.0_40-b43)
# Java VM: Java HotSpot(TM) 64-Bit Server VM (24.0-b56 mixed mode windows-amd64 compressed oops)
# Problematic frame:
# V  [jvm.dll+0x542b9]
#
# Failed to write core dump. Minidumps are not enabled by default on client versions of Windows
#
# An error report file with more information is saved as:
# D:\Program Files\WorkStations\EclipseWorkStation\HelloWorld03\hs_err_pid51568.log
#
# If you would like to submit a bug report, please visit:
#   http://bugreport.sun.com/bugreport/crash.jsp
#

调试 StringEncoding.encode 的过程中的crsh 日志文件 : http://download.csdn.net/download/u011039332/9928429

今天 又来debug, 结果 还是 crash了, 然后 这里的日志是今天的crash日志, 昨天的被删掉了

 

--------------------------------------------------

对了, 差点忘记了放测试代码, 几句 System.out.println

 

/*** Test28OutputChinese** @author Jerry.X.He <970655147@qq.com>* @version 1.0* @date 8/9/2017 8:43 PM*/
public class Test28OutputChinese {// Test28OutputChinesepublic static void main(String[] args) throws Exception {String str = "你好";System.out.println(str);System.out.println(Charset.defaultCharset());byte[] gbkDecoded = str.getBytes("gbk");for (byte b : gbkDecoded) {System.out.print(b + " ");}System.out.println();String gbkUtf8 = new String(str.getBytes("gbk"), "utf-8");System.out.println(gbkUtf8);
//        info(new String(str.getBytes("gbk"), "ascii"));String utf8Gbk = new String(str.getBytes("utf-8"), "gbk");System.out.println(utf8Gbk);}}

--------------------------------------------------
 

 

 

希望之后能够回过头来真真正正的有头有尾的解释这个问题吧[上面都只是猜测], 哦, 对了 还有这个 crash 的原因

 

refer 

https://www.zhihu.com/question/30977092/answer/50182545

 

这篇关于24 碰到的一个 idea的奇怪的编码问题的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1010980

相关文章

springboot循环依赖问题案例代码及解决办法

《springboot循环依赖问题案例代码及解决办法》在SpringBoot中,如果两个或多个Bean之间存在循环依赖(即BeanA依赖BeanB,而BeanB又依赖BeanA),会导致Spring的... 目录1. 什么是循环依赖?2. 循环依赖的场景案例3. 解决循环依赖的常见方法方法 1:使用 @La

Python使用自带的base64库进行base64编码和解码

《Python使用自带的base64库进行base64编码和解码》在Python中,处理数据的编码和解码是数据传输和存储中非常普遍的需求,其中,Base64是一种常用的编码方案,本文我将详细介绍如何使... 目录引言使用python的base64库进行编码和解码编码函数解码函数Base64编码的应用场景注意

idea中创建新类时自动添加注释的实现

《idea中创建新类时自动添加注释的实现》在每次使用idea创建一个新类时,过了一段时间发现看不懂这个类是用来干嘛的,为了解决这个问题,我们可以设置在创建一个新类时自动添加注释,帮助我们理解这个类的用... 目录前言:详细操作:步骤一:点击上方的 文件(File),点击&nbmyHIgsp;设置(Setti

SpringBoot启动报错的11个高频问题排查与解决终极指南

《SpringBoot启动报错的11个高频问题排查与解决终极指南》这篇文章主要为大家详细介绍了SpringBoot启动报错的11个高频问题的排查与解决,文中的示例代码讲解详细,感兴趣的小伙伴可以了解一... 目录1. 依赖冲突:NoSuchMethodError 的终极解法2. Bean注入失败:No qu

MySQL新增字段后Java实体未更新的潜在问题与解决方案

《MySQL新增字段后Java实体未更新的潜在问题与解决方案》在Java+MySQL的开发中,我们通常使用ORM框架来映射数据库表与Java对象,但有时候,数据库表结构变更(如新增字段)后,开发人员可... 目录引言1. 问题背景:数据库与 Java 实体不同步1.1 常见场景1.2 示例代码2. 不同操作

IDEA中Git版本回退的两种实现方案

《IDEA中Git版本回退的两种实现方案》作为开发者,代码版本回退是日常高频操作,IntelliJIDEA集成了强大的Git工具链,但面对reset和revert两种核心回退方案,许多开发者仍存在选择... 目录一、版本回退前置知识二、Reset方案:整体改写历史1、IDEA图形化操作(推荐)1.1、查看提

如何解决mysql出现Incorrect string value for column ‘表项‘ at row 1错误问题

《如何解决mysql出现Incorrectstringvalueforcolumn‘表项‘atrow1错误问题》:本文主要介绍如何解决mysql出现Incorrectstringv... 目录mysql出现Incorrect string value for column ‘表项‘ at row 1错误报错

如何解决Spring MVC中响应乱码问题

《如何解决SpringMVC中响应乱码问题》:本文主要介绍如何解决SpringMVC中响应乱码问题,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录Spring MVC最新响应中乱码解决方式以前的解决办法这是比较通用的一种方法总结Spring MVC最新响应中乱码解

pip无法安装osgeo失败的问题解决

《pip无法安装osgeo失败的问题解决》本文主要介绍了pip无法安装osgeo失败的问题解决,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一... 进入官方提供的扩展包下载网站寻找版本适配的whl文件注意:要选择cp(python版本)和你py

解决Java中基于GeoTools的Shapefile读取乱码的问题

《解决Java中基于GeoTools的Shapefile读取乱码的问题》本文主要讨论了在使用Java编程语言进行地理信息数据解析时遇到的Shapefile属性信息乱码问题,以及根据不同的编码设置进行属... 目录前言1、Shapefile属性字段编码的情况:一、Shp文件常见的字符集编码1、System编码