Oracle学习系列:将较大的SQL文件导入数据库的操作步骤(含踩坑记录)

本文主要是介绍Oracle学习系列:将较大的SQL文件导入数据库的操作步骤(含踩坑记录),希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

文章目录

  • 场景
  • 环境
  • 正文
    • 一、前提
    • 二、上传SQL文件到服务器
    • 三、使用SQLplus命令登录
    • 四、导入SQL文件
    • 五、结果
  • 踩坑记录
    • 登录异常
    • SQL执行完毕,查看不了数据
    • SQL执行完毕,查看数据,显示乱码
      • 一、查看服务端编码
      • 二、查看环境变量 NLS_LANG 的设置
      • 三、查看文件编码是否和服务端一致
  • 总结
  • 备注
    • 查看数据库当前字符集参数设置
    • 查看数据库可用字符集参数设置
    • NLS_LANG参数组成
  • 随缘求赞

场景

因项目需要,需要将生产环境的数据导出一份到测试环境。其中,有几个表的数据量比较大,其中一个表的数据量大概在80万左右。如果直接使用Navicat工具进行导入,测试导入3万条,花了大概半小时。时间太慢,需要使用更好的方式进行导入。

环境

软件版本
Oracle12.1.0.2.0
Centos7

正文

接下来,就是整个处理过程。

一、前提

可以登录数据库服务器,有管理员权限或者数据库账户
在这里插入图片描述

二、上传SQL文件到服务器

需要将SQL文件上传到Oracle服务器,这样使用SQLplus客户端的时候,就可以直接指定本地文件了。
在这里插入图片描述

三、使用SQLplus命令登录

登录方式有多种,这里推荐直接使用sqlplus命令登录,然后输入账号密码。如果是直接在命令输入账号密码的话,使用history命令就可以拿到具体的账户密码。这样就存在密码泄露的危险。
在这里插入图片描述
如图,就是我进行登录的结果截图:
在这里插入图片描述

四、导入SQL文件

正常登陆进去的时候,然后就直接执行脚本,命令形式如下:

# 如果没有设置,执行一条就会输出结果,看起来很累赘
set feedback off
set define off
# 指定路径
@/home/test/test.sql
# 执行完毕之后,记得提交。不然是不生效的
commit;

五、结果

执行完毕之后,一个722071条数据的SQL文件,执行了大概10分钟就跑完了。 这个效率比之前导入3万条就花了30分钟的速度快多了。
在这里插入图片描述

踩坑记录

看到这里,如果中途没有踩坑,那么就perfect了。
在这里插入图片描述
但是,如果中途踩坑了,可以接着往下看,我记录了在这个过程中踩到的坑,希望可以减少各位看官宝贵的时间。
在这里插入图片描述

登录异常

如果登录进去,语法没有错,但是就是登录不了,问题提示截图如下:
在这里插入图片描述
看到这个ORA-12547的标志
在这里插入图片描述
这里可以做一步测试,测试管理员账户是否可以登录。像我这里,是可以登录的。
在这里插入图片描述
如果有哪位的情况和我一样,那就是权限问题了。
在这里插入图片描述
我们可以到Oracle安装目录的bin目录,查看权限,如图:
在这里插入图片描述
这里的权限需要进行更新,可以执行以下命令:

chmod 6751 oracle

结果如下:
在这里插入图片描述
更新完毕之后,退出SQLplus,重新登录进去。一般情况,是没有问题了。如图:
在这里插入图片描述

SQL执行完毕,查看不了数据

如果是这个问题,请确保进行了commit
在这里插入图片描述
因为客户端不像datastudio或者Navicat自动帮你commit的,需要显示执行commit语句。

SQL执行完毕,查看数据,显示乱码

解决的关键是要把服务端的字符集跟客户端的字符集统一起来。Oracle客户端通过NLS_LANG环境变量来确定客户端使用的字符集。所以,一般排查以下三个方面:
在这里插入图片描述

一、查看服务端编码

sqlplus输入以下命令:

select * from v$nls_parameters where parameter = 'NLS_CHARACTERSET';

结果如下:
在这里插入图片描述

二、查看环境变量 NLS_LANG 的设置

执行命令env | grep NLS,结果如下:
在这里插入图片描述
啊哈,这里竟然没有这个环境变量。
在这里插入图片描述
所以,这里有问题。方便快捷的方式便是直接设置环境变量,如下:

export NLS_LANG=AMERICAN_AMERICA.AL32UTF8

想一劳永逸的话,就得设置环境变量文件

在这里插入图片描述

如下:

vi .bash_profile
# 文件追加以下内容:
NLS_LANG=AMERICAN_AMERICA.AL32UTF8 
export NLS_LANG# 保存之后,使 bash_profile 设置生效
source .bash_profile

三、查看文件编码是否和服务端一致

博主这边的SQL文件编码为GB2312,而服务端的编码是UTF-8,所以需要将文件编码转换为UTF-8

一般经过上面三步,就可以解决导入文件乱码的问题。
在这里插入图片描述

总结

日常工作中,经常会遇到各种各样的问题。学会解决问题并记录解决步骤,对自己的能力是很有帮助的!
在这里插入图片描述

备注

记录一些执行sql,方便后期查询:

查看数据库当前字符集参数设置

SELECT * FROM v$nls_parameters;
# 或
select * from nls_database_parameters
# 或
select userenv('language') from dual;

查看数据库可用字符集参数设置

SELECT * FROM v$nls_valid_values;

NLS_LANG参数组成

NLS_LANG=<Language>_<Territory>.<Clients Characterset>

NLS_LANG 各部分含义如下:

  • LANGUAGE指定:
    • Oracle消息使用的语言
    • 日期中月份和日显示
  • TERRITORY指定
    • 货币和数字格式
    • 地区和计算星期及日期的习惯
  • CHARACTERSET:
    • 控制客户端应用程序使用的字符集

随缘求赞

如果我的文章对大家产生了帮忙,可以在文章底部点个赞或者收藏;
如果有好的讨论,可以留言;
如果想继续查看我以后的文章,可以点击关注
可以扫描以下二维码,关注我的公众号:枫夜之求索阁,查看我最新的分享!
在这里插入图片描述
拜拜

这篇关于Oracle学习系列:将较大的SQL文件导入数据库的操作步骤(含踩坑记录)的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1114814

相关文章

HarmonyOS学习(七)——UI(五)常用布局总结

自适应布局 1.1、线性布局(LinearLayout) 通过线性容器Row和Column实现线性布局。Column容器内的子组件按照垂直方向排列,Row组件中的子组件按照水平方向排列。 属性说明space通过space参数设置主轴上子组件的间距,达到各子组件在排列上的等间距效果alignItems设置子组件在交叉轴上的对齐方式,且在各类尺寸屏幕上表现一致,其中交叉轴为垂直时,取值为Vert

Ilya-AI分享的他在OpenAI学习到的15个提示工程技巧

Ilya(不是本人,claude AI)在社交媒体上分享了他在OpenAI学习到的15个Prompt撰写技巧。 以下是详细的内容: 提示精确化:在编写提示时,力求表达清晰准确。清楚地阐述任务需求和概念定义至关重要。例:不用"分析文本",而用"判断这段话的情感倾向:积极、消极还是中性"。 快速迭代:善于快速连续调整提示。熟练的提示工程师能够灵活地进行多轮优化。例:从"总结文章"到"用

Spring Security基于数据库验证流程详解

Spring Security 校验流程图 相关解释说明(认真看哦) AbstractAuthenticationProcessingFilter 抽象类 /*** 调用 #requiresAuthentication(HttpServletRequest, HttpServletResponse) 决定是否需要进行验证操作。* 如果需要验证,则会调用 #attemptAuthentica

Spring Security 从入门到进阶系列教程

Spring Security 入门系列 《保护 Web 应用的安全》 《Spring-Security-入门(一):登录与退出》 《Spring-Security-入门(二):基于数据库验证》 《Spring-Security-入门(三):密码加密》 《Spring-Security-入门(四):自定义-Filter》 《Spring-Security-入门(五):在 Sprin

SQL中的外键约束

外键约束用于表示两张表中的指标连接关系。外键约束的作用主要有以下三点: 1.确保子表中的某个字段(外键)只能引用父表中的有效记录2.主表中的列被删除时,子表中的关联列也会被删除3.主表中的列更新时,子表中的关联元素也会被更新 子表中的元素指向主表 以下是一个外键约束的实例展示

基于MySQL Binlog的Elasticsearch数据同步实践

一、为什么要做 随着马蜂窝的逐渐发展,我们的业务数据越来越多,单纯使用 MySQL 已经不能满足我们的数据查询需求,例如对于商品、订单等数据的多维度检索。 使用 Elasticsearch 存储业务数据可以很好的解决我们业务中的搜索需求。而数据进行异构存储后,随之而来的就是数据同步的问题。 二、现有方法及问题 对于数据同步,我们目前的解决方案是建立数据中间表。把需要检索的业务数据,统一放到一张M

如何去写一手好SQL

MySQL性能 最大数据量 抛开数据量和并发数,谈性能都是耍流氓。MySQL没有限制单表最大记录数,它取决于操作系统对文件大小的限制。 《阿里巴巴Java开发手册》提出单表行数超过500万行或者单表容量超过2GB,才推荐分库分表。性能由综合因素决定,抛开业务复杂度,影响程度依次是硬件配置、MySQL配置、数据表设计、索引优化。500万这个值仅供参考,并非铁律。 博主曾经操作过超过4亿行数据

python: 多模块(.py)中全局变量的导入

文章目录 global关键字可变类型和不可变类型数据的内存地址单模块(单个py文件)的全局变量示例总结 多模块(多个py文件)的全局变量from x import x导入全局变量示例 import x导入全局变量示例 总结 global关键字 global 的作用范围是模块(.py)级别: 当你在一个模块(文件)中使用 global 声明变量时,这个变量只在该模块的全局命名空

【前端学习】AntV G6-08 深入图形与图形分组、自定义节点、节点动画(下)

【课程链接】 AntV G6:深入图形与图形分组、自定义节点、节点动画(下)_哔哩哔哩_bilibili 本章十吾老师讲解了一个复杂的自定义节点中,应该怎样去计算和绘制图形,如何给一个图形制作不间断的动画,以及在鼠标事件之后产生动画。(有点难,需要好好理解) <!DOCTYPE html><html><head><meta charset="UTF-8"><title>06

学习hash总结

2014/1/29/   最近刚开始学hash,名字很陌生,但是hash的思想却很熟悉,以前早就做过此类的题,但是不知道这就是hash思想而已,说白了hash就是一个映射,往往灵活利用数组的下标来实现算法,hash的作用:1、判重;2、统计次数;