走近大数据之Hive进阶(三、Hive的内置函数)

2024-06-16 00:18

本文主要是介绍走近大数据之Hive进阶(三、Hive的内置函数),希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

目录

一、Hive数学函数

二、Hive字符函数

三、Hive收集函数和转换函数

四、Hive日期函数

五、Hive条件函数

六、Hive聚合函数和表生成函数


一、Hive数学函数

round 四舍五入 前面是小数,后面是取整位数

ceil 向上取整

floor 向下取整

二、Hive字符函数

字符串转换成小写:lower

字符串转换成大写:upper

>select lower('Hello World'), upper('Hello Hive'); 

字符串长度(字符数):length

>select length('Hello World'), length('你好'); //'你好'的字符数为2,字节数为4

拼接字符串:concat

>select concat('Hello', ' World');

求字符串的子串:substr

//substr(a, b)从a中第b位开始取,取右边所有字符

>select substr('Hello World', 3);

//substr(a, b, c) 从a中,第b位开始取,取c个字符

>select substr('Hello World', 3, 4);

去掉字符串前后的空格:trim

左填充:lpad

右填充:rpad

>select lpad('abcd', 10, '*'); //表示用*左填充'abcd'到10位

>select rpad('abcd', 10, '*'); //表示用*右填充'abcd'到10位

运行结果:

三、Hive收集函数和转换函数

收集函数 size 统计数据类型的长度

转换函数 cast 数据类型的转换

四、Hive日期函数

to_date 返回标准日期

year 返回日期中的年

month 返回日期中的月

day 返回日期中的天

weekofyear 返回该日期在一年中的第几周

datediff 返回两个日期的相差的天数

date_add 在当前日期的基础上,加上天数,并返回

date_sub 在当前日期的基础上,减去天数,并返回

五、Hive条件函数

从左到右返回第一个不为null的值:coalesce

条件表达式:case...when...

CASE a WHEN b THEN c [WHEN d THEN e]* [ELSE f] END

//如果a的值等于b时返回c,如果等于d返回e,等等等等,最后如果都不是返回f

六、Hive聚合函数和表生成函数

1、聚合函数

count 求总数

sum 求和

min 求最小值

max 求最大值

avg 求平均值

select count(*), sum(sal), max(sal), min(sal), avg(sal) ;

2、表生成函数

表生成函数 -explode 将每个key-value数据都转换成一行 

select explode(map(1,'tom',2,'mary',3,'mike'));

Result: ----------- 

1 Tom 

2 Mary 

3 Mike

这篇关于走近大数据之Hive进阶(三、Hive的内置函数)的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1064994

相关文章

Python容器转换与共有函数举例详解

《Python容器转换与共有函数举例详解》Python容器是Python编程语言中非常基础且重要的概念,它们提供了数据的存储和组织方式,下面:本文主要介绍Python容器转换与共有函数的相关资料,... 目录python容器转换与共有函数详解一、容器类型概览二、容器类型转换1. 基本容器转换2. 高级转换示

MySQL数据目录迁移的完整过程

《MySQL数据目录迁移的完整过程》文章详细介绍了将MySQL数据目录迁移到新硬盘的整个过程,包括新硬盘挂载、创建新的数据目录、迁移数据(推荐使用两遍rsync方案)、修改MySQL配置文件和重启验证... 目录1,新硬盘挂载(如果有的话)2,创建新的 mysql 数据目录3,迁移 MySQL 数据(推荐两

Python数据验证神器Pydantic库的使用和实践中的避坑指南

《Python数据验证神器Pydantic库的使用和实践中的避坑指南》Pydantic是一个用于数据验证和设置的库,可以显著简化API接口开发,文章通过一个实际案例,展示了Pydantic如何在生产环... 目录1️⃣ 崩溃时刻:当你的API接口又双叒崩了!2️⃣ 神兵天降:3行代码解决验证难题3️⃣ 深度

MySQL快速复制一张表的四种核心方法(包括表结构和数据)

《MySQL快速复制一张表的四种核心方法(包括表结构和数据)》本文详细介绍了四种复制MySQL表(结构+数据)的方法,并对每种方法进行了对比分析,适用于不同场景和数据量的复制需求,特别是针对超大表(1... 目录一、mysql 复制表(结构+数据)的 4 种核心方法(面试结构化回答)方法 1:CREATE

详解C++ 存储二进制数据容器的几种方法

《详解C++存储二进制数据容器的几种方法》本文主要介绍了详解C++存储二进制数据容器,包括std::vector、std::array、std::string、std::bitset和std::ve... 目录1.std::vector<uint8_t>(最常用)特点:适用场景:示例:2.std::arra

pandas使用apply函数给表格同时添加多列

《pandas使用apply函数给表格同时添加多列》本文介绍了利用Pandas的apply函数在DataFrame中同时添加多列,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习... 目录一、Pandas使用apply函数给表格同时添加多列二、应用示例一、Pandas使用apply函

MySQL中的DELETE删除数据及注意事项

《MySQL中的DELETE删除数据及注意事项》MySQL的DELETE语句是数据库操作中不可或缺的一部分,通过合理使用索引、批量删除、避免全表删除、使用TRUNCATE、使用ORDERBY和LIMI... 目录1. 基本语法单表删除2. 高级用法使用子查询删除删除多表3. 性能优化策略使用索引批量删除避免

MySQL 数据库进阶之SQL 数据操作与子查询操作大全

《MySQL数据库进阶之SQL数据操作与子查询操作大全》本文详细介绍了SQL中的子查询、数据添加(INSERT)、数据修改(UPDATE)和数据删除(DELETE、TRUNCATE、DROP)操作... 目录一、子查询:嵌套在查询中的查询1.1 子查询的基本语法1.2 子查询的实战示例二、数据添加:INSE

Nginx内置变量应用场景分析

《Nginx内置变量应用场景分析》Nginx内置变量速查表,涵盖请求URI、客户端信息、服务器信息、文件路径、响应与性能等类别,这篇文章给大家介绍Nginx内置变量应用场景分析,感兴趣的朋友跟随小编一... 目录1. Nginx 内置变量速查表2. 核心变量详解与应用场景3. 实际应用举例4. 注意事项Ng

Linux服务器数据盘移除并重新挂载的全过程

《Linux服务器数据盘移除并重新挂载的全过程》:本文主要介绍在Linux服务器上移除并重新挂载数据盘的整个过程,分为三大步:卸载文件系统、分离磁盘和重新挂载,每一步都有详细的步骤和注意事项,确保... 目录引言第一步:卸载文件系统第二步:分离磁盘第三步:重新挂载引言在 linux 服务器上移除并重新挂p