(37)数仓搭建-DWS 层

2024-01-22 23:08
文章标签 搭建 37 数仓 dws

本文主要是介绍(37)数仓搭建-DWS 层,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

5.1 业务术语
1 )用户
用户以设备为判断标准, 在移动统计中,每个独立设备认为是一个独立用户 Android
系统根据 IMEI 号, IOS 系统根据 OpenUDID 来标识一个独立用户,每部手机一个用户。
2 )新增用户
首次联网使用应用的用户。如果一个用户首次打开某 APP ,那这个用户定义为新增用
户;卸载再安装的设备,不会被算作一次新增。新增用户包括日新增用户、周新增用户、月
新增用户。
3 )活跃用户
打开应用的用户即为活跃用户,不考虑用户的使用情况。每天一台设备打开多次会被计
为一个活跃用户。
4 )周(月)活跃用户
某个自然周(月)内启动过应用的用户,该周(月)内的多次启动只记一个活跃用户。
5 )月活跃率
月活跃用户与截止到该月累计的用户总和之间的比例。
6 )沉默用户
用户仅在安装当天(次日)启动一次,后续时间无再启动行为。该指标可以反映新增用
户质量和用户与 APP 的匹配程度。
7 )版本分布
不同版本的周内各天新增用户数,活跃用户数和启动次数。利于判断 APP 各个版本之
间的优劣和用户行为习惯。
8 )本周回流用户
上周未启动过应用,本周启动了应用的用户。
9 )连续 n 周活跃用户
连续 n 周,每周至少启动一次。
10 )忠诚用户
连续活跃 5 周以上的用户
11 )连续活跃用户
连续 2 周及以上活跃的用户
12 )近期流失用户
连续 n 2<= n <= 4 )周没有启动应用的用户。(第 n+1 周没有启动过)
13 )留存用户
某段时间内的新增用户,经过一段时间后,仍然使用应用的被认作是留存用户;这部分
用户占当时新增用户的比例即是留存率。
例如, 5 月份新增用户 200 ,这 200 人在 6 月份启动过应用的有 100 人, 7 月份启动过
应用的有 80 人,
8 月份启动过应用的有 50 人;则 5 月份新增用户一个月后的留存率是 50%
二个月后的留存率是 40% ,三个月后的留存率是 25%
14 )用户新鲜度
每天启动应用的新老用户比例,即新增用户数占活跃用户数的比例。
15 )单次使用时长
每次启动使用的时间长度。
16 )日使用时长
累计一天内的使用时间长度。
17 )启动次数计算标准
IOS 平台应用退到后台就算一次独立的启动; Android 平台我们规定,两次启动之间的
间隔小于 30 秒,被计算一次启动。用户在使用过程中,若因收发短信或接电话等退出应用
30 秒又再次返回应用中,那这两次行为应该是延续而非独立的,所以可以被算作一次使用
行为,即一次启动。业内大多使用 30 秒这个标准,但用户还是可以自定义此时间间隔。
5.2 系统函数
5.2.1 nvl 函数
1 )基本语法
NVL (表达式 1 ,表达式 2
如果表达式 1 为空值, NVL 返回值为表达式 2 的值,否则返回表达式 1 的值。
该函数的目的是把一个空值( null )转换成一个实际的值。其表达式的值可以是 数字型、
字符型和日期型 但是表达式 1 和表达式 2 的数据类型 必须为同一个类型
2 )案例实操
hive (gmall)> select nvl(1,0);
1
hive (gmall)> select nvl(null,"hello");
hello
5.2.2 日期处理函数
1 date_format 函数(根据格式整理日期)
hive (gmall)> select date_format('2020-06-14','yyyy-MM');
2020-06
2 date_add 函数(加减日期)
hive (gmall)> select date_add('2020-06-14',-1);
2020-06-13
hive (gmall)> select date_add('2020-06-14',1);
2020-06-15
3 next_day 函数
1 )取当前天的下一个周一
hive (gmall)> select next_day('2020-06-14','MO');
2020-06-15
说明:星期一到星期日的英文( Monday Tuesday Wednesday Thursday Friday Saturday Sunday
2 )取当前周的周一
hive (gmall)> select date_add(next_day('2020-06-14','MO'),-7);
2020-06-8
4 last_day 函数(求当月最后一天日期)
hive (gmall)> select last_day('2020-06-14');
2020-06-30
5.2.3 复杂数据类型定义
1 map 结构数据定义
map<string,string>
2 array 结构数据定义
array<string>
3 struct 结构数据定义
struct<id:int,name:string,age:int>
4 struct array 嵌套定义
array<struct<id:int,name:string,age:int>>

这篇关于(37)数仓搭建-DWS 层的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/634531

相关文章

5分钟获取deepseek api并搭建简易问答应用

《5分钟获取deepseekapi并搭建简易问答应用》本文主要介绍了5分钟获取deepseekapi并搭建简易问答应用,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需... 目录1、获取api2、获取base_url和chat_model3、配置模型参数方法一:终端中临时将加

Mycat搭建分库分表方式

《Mycat搭建分库分表方式》文章介绍了如何使用分库分表架构来解决单表数据量过大带来的性能和存储容量限制的问题,通过在一对主从复制节点上配置数据源,并使用分片算法将数据分配到不同的数据库表中,可以有效... 目录分库分表解决的问题分库分表架构添加数据验证结果 总结分库分表解决的问题单表数据量过大带来的性能

Java汇编源码如何查看环境搭建

《Java汇编源码如何查看环境搭建》:本文主要介绍如何在IntelliJIDEA开发环境中搭建字节码和汇编环境,以便更好地进行代码调优和JVM学习,首先,介绍了如何配置IntelliJIDEA以方... 目录一、简介二、在IDEA开发环境中搭建汇编环境2.1 在IDEA中搭建字节码查看环境2.1.1 搭建步

Python基于火山引擎豆包大模型搭建QQ机器人详细教程(2024年最新)

《Python基于火山引擎豆包大模型搭建QQ机器人详细教程(2024年最新)》:本文主要介绍Python基于火山引擎豆包大模型搭建QQ机器人详细的相关资料,包括开通模型、配置APIKEY鉴权和SD... 目录豆包大模型概述开通模型付费安装 SDK 环境配置 API KEY 鉴权Ark 模型接口Prompt

鸿蒙开发搭建flutter适配的开发环境

《鸿蒙开发搭建flutter适配的开发环境》文章详细介绍了在Windows系统上如何创建和运行鸿蒙Flutter项目,包括使用flutterdoctor检测环境、创建项目、编译HAP包以及在真机上运... 目录环境搭建创建运行项目打包项目总结环境搭建1.安装 DevEco Studio NEXT IDE

搭建Kafka+zookeeper集群调度

前言 硬件环境 172.18.0.5        kafkazk1        Kafka+zookeeper                Kafka Broker集群 172.18.0.6        kafkazk2        Kafka+zookeeper                Kafka Broker集群 172.18.0.7        kafkazk3

【IPV6从入门到起飞】5-1 IPV6+Home Assistant(搭建基本环境)

【IPV6从入门到起飞】5-1 IPV6+Home Assistant #搭建基本环境 1 背景2 docker下载 hass3 创建容器4 浏览器访问 hass5 手机APP远程访问hass6 更多玩法 1 背景 既然电脑可以IPV6入站,手机流量可以访问IPV6网络的服务,为什么不在电脑搭建Home Assistant(hass),来控制你的设备呢?@智能家居 @万物互联

pico2 开发环境搭建-基于ubuntu

pico2 开发环境搭建-基于ubuntu 安装编译工具链下载sdk 和example编译example 安装编译工具链 sudo apt install cmake gcc-arm-none-eabi libnewlib-arm-none-eabi libstdc++-arm-none-eabi-newlib 注意cmake的版本,需要在3.17 以上 下载sdk 和ex

JavaFX环境的搭建和一个简单的例子

之前在网上搜了很多与javaFX相关的资料,都说要在Eclepse上要安装sdk插件什么的,反正就是乱七八糟的一大片,最后还是没搞成功,所以我在这里写下我搭建javaFX成功的环境给大家做一个参考吧。希望能帮助到你们! 1.首先要保证你的jdk版本能够支持JavaFX的开发,jdk-7u25版本以上的都能支持,最好安装jdk8吧,因为jdk8对支持JavaFX有新的特性了,比如:3D等;

springboot+maven搭建的项目,集成单元测试

springboot+maven搭建的项目,集成单元测试 1.在pom.xml文件中引入单元测试的依赖包 <!--单元测试依赖--><dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-test</artifactId><scope>test</scope></depen