48.判断是否为首单用户实现

2024-01-22 22:58

本文主要是介绍48.判断是否为首单用户实现,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

4.1 准备工作
4.1.1 使用 phoenix 在 hbase 中建表
(1)解压 squirrel-sql-3.9.1.zip

 (2)在解压后的目录双击运行 squirrel-sql.bat

 (3)添加 phoenix 驱动

 

(4)具体驱动配置如下
Example URL
jdbc:phoenix:hadoop202,hadoop203,hadoop204:2181
Class Name
org.apache.phoenix.jdbc.PhoenixDriver

 (5)创建连接

提前启动好 hdfs 以及 hbase

 (6)连接后,查看数据库对象

 (7)执行 SQL 语句

 (8)调整字体大小

 (9)执行建表以语句

create table user_status2020( user_id varchar primary key ,state.if_consumed
varchar ) SALT_BUCKETS = 3

 4.1.2 在 pom.xml 文件中加入相关依赖

 4.1.3 创建样例类

(1)创建 OrderInfo 样例类

 

 (2)创建 UserStatus 样例类

 4.1.4 创建 phoenix 查询工具类 PhoenixUtil

 

 

4.2 读取订单信息,查询用户状态(判断是否首单)
4.2.1 创建业务类 OrderInfoApp,读取订单、维护用户状
态代码

 

 

 

4.2.2 测试
启动 ZK、Kafka、Redis、Maxwell、HDFS、Hbase
运行 BaseDBMaxwellApp、OrderInfoApp
修改模拟生成数据日期、运行模拟生成日志的 jar 包
OrderInfoApp 输出结果

 

4.3
维护用户状态
将用户是否消费的状态保存到 Hbase 中
4.3.1 在 OrderInfoApp 中继续完成代码

 

 

4.3.2 测试
启动 ZK、Kafka、Redis、Maxwell、HDFS、Hbase
运行 BaseDBMaxwellApp、OrderInfoApp
修改模拟生成数据日期、运行模拟生成日志的 jar 包
Hbase 输出结果

 

4.4
一个采集周期状态修正
漏洞
如果一个用户是首次消费,在一个采集周期中,这个用户下单了 2 次,那么就会
把这同一个用户都会统计为首单消费
解决办法
应该将同一采集周期的同一用户的最早的订单标记为首单,其它都改为非首单
同一采集周期的同一用户-----按用户分组(groupByKey)
最早的订单-----排序,取最早(sortwith)
标记为首单-----具体业务代码
代码

 

 

 

 

 

这篇关于48.判断是否为首单用户实现的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/634510

相关文章

Java中使用Java Mail实现邮件服务功能示例

《Java中使用JavaMail实现邮件服务功能示例》:本文主要介绍Java中使用JavaMail实现邮件服务功能的相关资料,文章还提供了一个发送邮件的示例代码,包括创建参数类、邮件类和执行结... 目录前言一、历史背景二编程、pom依赖三、API说明(一)Session (会话)(二)Message编程客

Java中List转Map的几种具体实现方式和特点

《Java中List转Map的几种具体实现方式和特点》:本文主要介绍几种常用的List转Map的方式,包括使用for循环遍历、Java8StreamAPI、ApacheCommonsCollect... 目录前言1、使用for循环遍历:2、Java8 Stream API:3、Apache Commons

Python判断for循环最后一次的6种方法

《Python判断for循环最后一次的6种方法》在Python中,通常我们不会直接判断for循环是否正在执行最后一次迭代,因为Python的for循环是基于可迭代对象的,它不知道也不关心迭代的内部状态... 目录1.使用enuhttp://www.chinasem.cnmerate()和len()来判断for

C#提取PDF表单数据的实现流程

《C#提取PDF表单数据的实现流程》PDF表单是一种常见的数据收集工具,广泛应用于调查问卷、业务合同等场景,凭借出色的跨平台兼容性和标准化特点,PDF表单在各行各业中得到了广泛应用,本文将探讨如何使用... 目录引言使用工具C# 提取多个PDF表单域的数据C# 提取特定PDF表单域的数据引言PDF表单是一

使用Python实现高效的端口扫描器

《使用Python实现高效的端口扫描器》在网络安全领域,端口扫描是一项基本而重要的技能,通过端口扫描,可以发现目标主机上开放的服务和端口,这对于安全评估、渗透测试等有着不可忽视的作用,本文将介绍如何使... 目录1. 端口扫描的基本原理2. 使用python实现端口扫描2.1 安装必要的库2.2 编写端口扫

PyCharm接入DeepSeek实现AI编程的操作流程

《PyCharm接入DeepSeek实现AI编程的操作流程》DeepSeek是一家专注于人工智能技术研发的公司,致力于开发高性能、低成本的AI模型,接下来,我们把DeepSeek接入到PyCharm中... 目录引言效果演示创建API key在PyCharm中下载Continue插件配置Continue引言

MySQL分表自动化创建的实现方案

《MySQL分表自动化创建的实现方案》在数据库应用场景中,随着数据量的不断增长,单表存储数据可能会面临性能瓶颈,例如查询、插入、更新等操作的效率会逐渐降低,分表是一种有效的优化策略,它将数据分散存储在... 目录一、项目目的二、实现过程(一)mysql 事件调度器结合存储过程方式1. 开启事件调度器2. 创

使用Python实现操作mongodb详解

《使用Python实现操作mongodb详解》这篇文章主要为大家详细介绍了使用Python实现操作mongodb的相关知识,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 目录一、示例二、常用指令三、遇到的问题一、示例from pymongo import MongoClientf

SQL Server使用SELECT INTO实现表备份的代码示例

《SQLServer使用SELECTINTO实现表备份的代码示例》在数据库管理过程中,有时我们需要对表进行备份,以防数据丢失或修改错误,在SQLServer中,可以使用SELECTINT... 在数据库管理过程中,有时我们需要对表进行备份,以防数据丢失或修改错误。在 SQL Server 中,可以使用 SE

基于Go语言实现一个压测工具

《基于Go语言实现一个压测工具》这篇文章主要为大家详细介绍了基于Go语言实现一个简单的压测工具,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 目录整体架构通用数据处理模块Http请求响应数据处理Curl参数解析处理客户端模块Http客户端处理Grpc客户端处理Websocket客户端