HuggingFists系统功能介绍(4)--作业管理

2024-02-25 17:44

本文主要是介绍HuggingFists系统功能介绍(4)--作业管理,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

作业管理

    在生产环境中,为了确保数据业务的持续稳定性,所以能够上线的数据处理与分析流程都必须是稳定的。且很多场景下,流程的调度运行都是自动完成的。这样能最大限度的降低人为操作引起的问题。作业管理用于帮助使用者管理以及调度经过测试验证并发布了的流程。作业管理提供了流程作业和流程任务两个概念。流程作业描述了流程运行所需的资源、调度计划等信息。每当流程作业满足调度计划的调度条件时就会产生一个具体的流程任务,HuggingFists会调度该流程任务完成具体的执行。

作业

       下面我们进入作业管理。

      

界面的左侧部分为作业的分组树,可以对作业按业务类型进行分组管理。点中分组,可以在界面的右侧以列表形式看到分组下的所有作业。作业分为即时、定时以及事件触发三种类型。

  • 即时作业:作业创建后会被立即执行,且只执行一次。
  • 定时作业:作业按照设定的时间调度计划,定期运行,可调度多次,每次产生一个流程任务。
  • 事件触发作业:当事件满足作业的触发条件时,作业被调度运行,可调度多次,每次产生一个流程任务。HuggingFists的社区版不支持此种类型的调度方式。

        在定义可多次运行的作业时,需要格外注意作业可能被调度的频次是否会超出系统计算资源的支撑能力。超出后会给系统的整体调度运行带来不可预知的问题。

        下面我们通过创建一个“定时作业”来简单了解作业管理的相关功能。在“定时”作业页点击“新增”按钮,创建作业。

定时任务-基本信息

定时任务-计算资源

定时任务-调度计划

        根据定时作业向导创建作业。第一步填写作业基本信息,选中作业运行所需的流程及版本,若作业运行所需的时间比较长,可以增大作业超时时间,缺省为7200秒,即2个小时;第二步为流程变量设置运行值,若流程内未用到变量则跳过此步;第三步,配置流程运行所需的节点资源,可指明节点名称的正则表达式;最后,设置作业的调度周期,缺省采用Cron表达式描述。该表达式拥有丰富的时间周期描述能力,能够满足使用者的各种周期性调度需求。

        定时作业创建完成后,HuggingFists会按照调度计划定期调度执行流程。选中作业,点击查看,可以看到由作业派发运行的所有任务列表。

        点击任务,可以查看任务的运行日志、算子运行状态以及输出结果等信息。这与我们在流程调试时能看到的内容一致。

任务      

        下面进入“任务”界面。在该界面可以对所有流程任务,按类型、运行状态、时间查询统计。帮助使用者对系统中流程任务的运行状况有一个全面的了解。

小结

    作业管理帮助使用者实现流程的自动化运行调度,从而大大提高了数据业务的生产效率。到此为止,HuggingFists的主体功能部分就介绍完了,下面我们将介绍一下工具的支撑功能部分。HuggingFists的支撑功能拥有很好的环境适应性,其能方便、快捷的整合本地以及互联网中的各类能力,从而集中、高效、低成本的解决使用者的各类数据业务需求。

这篇关于HuggingFists系统功能介绍(4)--作业管理的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/746212

相关文章

SpringKafka消息发布之KafkaTemplate与事务支持功能

《SpringKafka消息发布之KafkaTemplate与事务支持功能》通过本文介绍的基本用法、序列化选项、事务支持、错误处理和性能优化技术,开发者可以构建高效可靠的Kafka消息发布系统,事务支... 目录引言一、KafkaTemplate基础二、消息序列化三、事务支持机制四、错误处理与重试五、性能优

SpringIntegration消息路由之Router的条件路由与过滤功能

《SpringIntegration消息路由之Router的条件路由与过滤功能》本文详细介绍了Router的基础概念、条件路由实现、基于消息头的路由、动态路由与路由表、消息过滤与选择性路由以及错误处理... 目录引言一、Router基础概念二、条件路由实现三、基于消息头的路由四、动态路由与路由表五、消息过滤

Spring Boot 3.4.3 基于 Spring WebFlux 实现 SSE 功能(代码示例)

《SpringBoot3.4.3基于SpringWebFlux实现SSE功能(代码示例)》SpringBoot3.4.3结合SpringWebFlux实现SSE功能,为实时数据推送提供... 目录1. SSE 简介1.1 什么是 SSE?1.2 SSE 的优点1.3 适用场景2. Spring WebFlu

基于SpringBoot实现文件秒传功能

《基于SpringBoot实现文件秒传功能》在开发Web应用时,文件上传是一个常见需求,然而,当用户需要上传大文件或相同文件多次时,会造成带宽浪费和服务器存储冗余,此时可以使用文件秒传技术通过识别重复... 目录前言文件秒传原理代码实现1. 创建项目基础结构2. 创建上传存储代码3. 创建Result类4.

Python+PyQt5实现多屏幕协同播放功能

《Python+PyQt5实现多屏幕协同播放功能》在现代会议展示、数字广告、展览展示等场景中,多屏幕协同播放已成为刚需,下面我们就来看看如何利用Python和PyQt5开发一套功能强大的跨屏播控系统吧... 目录一、项目概述:突破传统播放限制二、核心技术解析2.1 多屏管理机制2.2 播放引擎设计2.3 专

一文详解SpringBoot响应压缩功能的配置与优化

《一文详解SpringBoot响应压缩功能的配置与优化》SpringBoot的响应压缩功能基于智能协商机制,需同时满足很多条件,本文主要为大家详细介绍了SpringBoot响应压缩功能的配置与优化,需... 目录一、核心工作机制1.1 自动协商触发条件1.2 压缩处理流程二、配置方案详解2.1 基础YAML

MySQL中慢SQL优化的不同方式介绍

《MySQL中慢SQL优化的不同方式介绍》慢SQL的优化,主要从两个方面考虑,SQL语句本身的优化,以及数据库设计的优化,下面小编就来给大家介绍一下有哪些方式可以优化慢SQL吧... 目录避免不必要的列分页优化索引优化JOIN 的优化排序优化UNION 优化慢 SQL 的优化,主要从两个方面考虑,SQL 语

Linux系统之主机网络配置方式

《Linux系统之主机网络配置方式》:本文主要介绍Linux系统之主机网络配置方式,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录一、查看主机的网络参数1、查看主机名2、查看IP地址3、查看网关4、查看DNS二、配置网卡1、修改网卡配置文件2、nmcli工具【通用

Linux系统之dns域名解析全过程

《Linux系统之dns域名解析全过程》:本文主要介绍Linux系统之dns域名解析全过程,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录一、dns域名解析介绍1、DNS核心概念1.1 区域 zone1.2 记录 record二、DNS服务的配置1、正向解析的配置

使用PyTorch实现手写数字识别功能

《使用PyTorch实现手写数字识别功能》在人工智能的世界里,计算机视觉是最具魅力的领域之一,通过PyTorch这一强大的深度学习框架,我们将在经典的MNIST数据集上,见证一个神经网络从零开始学会识... 目录当计算机学会“看”数字搭建开发环境MNIST数据集解析1. 认识手写数字数据库2. 数据预处理的