数据中台 | 数据智能平台产品系列文章,企业开发和盘活数据资产的利器!(下篇)

本文主要是介绍数据中台 | 数据智能平台产品系列文章,企业开发和盘活数据资产的利器!(下篇),希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

前言

回顾上篇,我们了解到业对于数据资产及其背后价值实现和变现的需求,为了跟上市场的脚步,满足用户现阶段需求,我们重新梳理了产品体系,推出升级的2.0版本产品,可以向客户输出数据的采集和存储、数据治理、数据价值开发、数据应用开发、数资登记运营、数资价值评估等数据资产开发的六大全域核心能力。

上篇文章中,我们介绍数据智能平台产品的研发背景、产品定位、产品架构以及数据的采集和存储、数据治理、数据价值开发三大核心能力,今天我们接着上篇继续介绍数据智能平台的数据应用开发、数资登记运营、数资价值评估核心能力。

图片

01 数据应用开发

通过上篇文章中介绍的数据采集存储和数据综合治理功能对数据进行采集和治理后,形成有价值的数据存入数据仓库。数据应用开发模块基于数据仓库的价值数据结合用户的业务需求提供低代码工具、GIS工具、BI工具等数据应用开发工具,形成数据应用高效便捷开发的能力,并完成APP、应用程序、软件平台、小程序、BI等满足用户业务场景需求的数据应用开发。
 

图片

低代码工具:

低代码是一种能够加速软件研发进程的高效开发方法,它通过视觉化拖放工具、预定义的模块和组件、自动生成的代码和其他辅助功能来帮助用户简化应用程序的开发过程,开发人员仅需要编写少量的代码来完成一些特定的功能,例如添加自定义的业务逻辑、调整视图等。因其具有高效、灵活等优势,已经成为大中小企业数字化转型的重要工具,被广泛应用于各类企业和机关单位。

低代码工具通常由以下部分组成:

  • 预定义组件:提供各种预定义的组件、模块和插件,用户可以通过拖拽这些组件来快速构建应用程序,例如数据表格、表单、地图等。

  • 可视化设计器:具备可视化定义UI,工作流和数据模型的设计器,且在必要时可以支持手写代码

  • 数据集成管理:支持数据表、API、Excel、ETL、实时数据(Kafka)等多种数据源的集成,以方便用户在应用程序中使用这些数据。

  • 工作流管理工具:提供了强大的工作流管理功能,支持业务流程的定义、管理和执行,通过图形化界面绘制业务流程图,并设置各个节点的属性和行为,实现业务流程的自动化管理。

  • 自动生成代码:用户不需要手动编写代码,低代码平台可以自动生成代码,从而减少了编程的工作量。

GIS工具:

GIS工具可以提供基于GIS的各类专业的地图应用工具和分析工具,包括:专业地图工具、数据分析工具、位置轨迹服务、标准地址服务、可视化服务、地图基础服务、地图数据管理、计算服务、大数据分析服务等。

BI工具:

提供数据大屏可视化工具,支持通过拖拽预置的图表组件和大屏模版,配合页面化的数据源接入、绑定功能,低门槛实现数据可视化设计工作。包括如下功能:

  • 我的工作台:包括用户日常设计大屏项目需要用到的功能,如我的草稿箱、我的项目、我的共享、我的分享、我的分享等功能。

  • 共享项目:显示其他用户共享的项目,可以进行多人协同设计。

  • 大屏配置:大屏模板设计相关功能,包括组件配置功能和大屏模板设计功能。

  • 大屏设计:利用预置的组件和模板,通过可视化拖拽方式,低代码实现可视化大屏设计。

  • 行业模板:在大屏模板的基础上加入了业务组件,形成具有通用性的行业模板,设计师在设计大屏项目时可直接套用行业模板进行调整和设计。

图片

02 数资登记运营

数据资产登记运营模块主要包括数据资产登记数据资产目录数据授权管理数据运营监管四大能力。通过对企业内部数据资产的登记和上架操作,形成数据资产目录,支持数据权限申请与审批功能,并对数据资产的调用情况进行监管,为后续的数据资产价值评估做好准备。

2.1 数据资产登记

数据资产通常分布于企业内的各个业务部门,该功用于各业务部门对各种类型的数据资产相关信息进登记,登记的信息主要用于后续的数据资产价值评估阶段,可以在数据资产目录进行查看。

我们将数据资产分为:数据表、算法、模型、API和数据应用五大类,不同类型的数据资产登记的信息不同。登记包括:名称、类型、登记主体信息、覆盖区域、所属行业、应用场景、数据规模、数据来源、存储方式、数据结构、数据字典、数据生命周期、生产频率、数据权利信息、数据成本、数据安全信息等。

2.2 数据资产目录

对登记后的数据资产进行“上架”操作,将不同类型的数据资产上架到不同的数据资产目录:数据表目录、算法目录、模型目录、API目录、应用目录,进行分层分类管理。

  • 数据资产管理:数据资产的查询、预览功能,可以查看到数据资产的登记信息和真实数据。仅有经过上架操作的数据资产可以被其他用户看到,用户可以通过检索功能查找需要的数据资产。

  • 数据表目录:对数据表类型的数据资产进行分层管理,例如原始库目录、资源库目录、业务库目录、知识库目录、主数据目录等。

  • 资产面板:通过图表形式统计各类数据资产的规模情况。

  • 分层分类:通过标签创建和维护功能,对数据资产进行分层分类管理。

2.3 数据权限管理

用户通过数据资产目录查找到需要的数据后,可以发起权限申请,数据审批人员审批通过后,再由数据管理人员进行授权操作。

图片

2.4 数据运营监管

对数据资产的授权情况,调用频次,返回数据规模,使用表现等信息进行实时监控,并以图表的形式对监管信息进行可视化展示。

03 数资价值评估

数据资产价值评估模块支持对数据资产目录中的数据资产进行价值评估,其流程如下:

(1)将数据资产导入成为待评估对象;

(2)选定要评估的数据资产创建评估对象;

(3)选择评估对象和评估模型,创建评估任务;

(4)根据选择的评估模型类型填写对应的模型参数,目前包括:成本法模型、收益法模型、市场法模型,支持后续扩展;

(5)若选择的是成本法模型,需要先对评估对象进行数资质量评估,将评估结果做为数资质量参数填报,影响数据资产整体成本。

(6)评估模型计算,产生评估结果,并生成评估报告;

(7)评估任务完成。

图片

数据资产评估模块主要包括:数据资产导入、评估对象管理、评估任务管理、评估模型管理、数据资产质量评估、数据资产评估监控、数据资产评估报告等功能。

04 小结

小兵用两篇文章为您整体介绍了重新梳理和升级后的数据智能平台产品,产品的能力覆盖了数据资产生命周期的两个核心阶段一是数据资产的产生阶段,通过数据的采集、存储、治理、价值开发和应用开发,为企业“打造”数据产品,形成数据资产;二是数据资产的运营阶段,通过对数据资产的登记、运营和价值评估,为数据资产的入表和上市交易打好基础。

后续,围绕数据智能平台的六大核心能力,我们会持续进行系列文章的更新,包含六大核心能力领域的详细介绍、知识科普、产品&方案介绍、技术对比&选型、设计与开发要点等知识和经验的分享,满满都是干货,等什么?赶紧关注吧

这篇关于数据中台 | 数据智能平台产品系列文章,企业开发和盘活数据资产的利器!(下篇)的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1139400

相关文章

Spring Security 从入门到进阶系列教程

Spring Security 入门系列 《保护 Web 应用的安全》 《Spring-Security-入门(一):登录与退出》 《Spring-Security-入门(二):基于数据库验证》 《Spring-Security-入门(三):密码加密》 《Spring-Security-入门(四):自定义-Filter》 《Spring-Security-入门(五):在 Sprin

流媒体平台/视频监控/安防视频汇聚EasyCVR播放暂停后视频画面黑屏是什么原因?

视频智能分析/视频监控/安防监控综合管理系统EasyCVR视频汇聚融合平台,是TSINGSEE青犀视频垂直深耕音视频流媒体技术、AI智能技术领域的杰出成果。该平台以其强大的视频处理、汇聚与融合能力,在构建全栈视频监控系统中展现出了独特的优势。视频监控管理系统EasyCVR平台内置了强大的视频解码、转码、压缩等技术,能够处理多种视频流格式,并以多种格式(RTMP、RTSP、HTTP-FLV、WebS

大模型研发全揭秘:客服工单数据标注的完整攻略

在人工智能(AI)领域,数据标注是模型训练过程中至关重要的一步。无论你是新手还是有经验的从业者,掌握数据标注的技术细节和常见问题的解决方案都能为你的AI项目增添不少价值。在电信运营商的客服系统中,工单数据是客户问题和解决方案的重要记录。通过对这些工单数据进行有效标注,不仅能够帮助提升客服自动化系统的智能化水平,还能优化客户服务流程,提高客户满意度。本文将详细介绍如何在电信运营商客服工单的背景下进行

基于MySQL Binlog的Elasticsearch数据同步实践

一、为什么要做 随着马蜂窝的逐渐发展,我们的业务数据越来越多,单纯使用 MySQL 已经不能满足我们的数据查询需求,例如对于商品、订单等数据的多维度检索。 使用 Elasticsearch 存储业务数据可以很好的解决我们业务中的搜索需求。而数据进行异构存储后,随之而来的就是数据同步的问题。 二、现有方法及问题 对于数据同步,我们目前的解决方案是建立数据中间表。把需要检索的业务数据,统一放到一张M

这15个Vue指令,让你的项目开发爽到爆

1. V-Hotkey 仓库地址: github.com/Dafrok/v-ho… Demo: 戳这里 https://dafrok.github.io/v-hotkey 安装: npm install --save v-hotkey 这个指令可以给组件绑定一个或多个快捷键。你想要通过按下 Escape 键后隐藏某个组件,按住 Control 和回车键再显示它吗?小菜一碟: <template

关于数据埋点,你需要了解这些基本知识

产品汪每天都在和数据打交道,你知道数据来自哪里吗? 移动app端内的用户行为数据大多来自埋点,了解一些埋点知识,能和数据分析师、技术侃大山,参与到前期的数据采集,更重要是让最终的埋点数据能为我所用,否则可怜巴巴等上几个月是常有的事。   埋点类型 根据埋点方式,可以区分为: 手动埋点半自动埋点全自动埋点 秉承“任何事物都有两面性”的道理:自动程度高的,能解决通用统计,便于统一化管理,但个性化定

Hadoop企业开发案例调优场景

需求 (1)需求:从1G数据中,统计每个单词出现次数。服务器3台,每台配置4G内存,4核CPU,4线程。 (2)需求分析: 1G / 128m = 8个MapTask;1个ReduceTask;1个mrAppMaster 平均每个节点运行10个 / 3台 ≈ 3个任务(4    3    3) HDFS参数调优 (1)修改:hadoop-env.sh export HDFS_NAMENOD

使用SecondaryNameNode恢复NameNode的数据

1)需求: NameNode进程挂了并且存储的数据也丢失了,如何恢复NameNode 此种方式恢复的数据可能存在小部分数据的丢失。 2)故障模拟 (1)kill -9 NameNode进程 [lytfly@hadoop102 current]$ kill -9 19886 (2)删除NameNode存储的数据(/opt/module/hadoop-3.1.4/data/tmp/dfs/na

异构存储(冷热数据分离)

异构存储主要解决不同的数据,存储在不同类型的硬盘中,达到最佳性能的问题。 异构存储Shell操作 (1)查看当前有哪些存储策略可以用 [lytfly@hadoop102 hadoop-3.1.4]$ hdfs storagepolicies -listPolicies (2)为指定路径(数据存储目录)设置指定的存储策略 hdfs storagepolicies -setStoragePo

Hadoop集群数据均衡之磁盘间数据均衡

生产环境,由于硬盘空间不足,往往需要增加一块硬盘。刚加载的硬盘没有数据时,可以执行磁盘数据均衡命令。(Hadoop3.x新特性) plan后面带的节点的名字必须是已经存在的,并且是需要均衡的节点。 如果节点不存在,会报如下错误: 如果节点只有一个硬盘的话,不会创建均衡计划: (1)生成均衡计划 hdfs diskbalancer -plan hadoop102 (2)执行均衡计划 hd