【青梅快讯】Greenplum关键组件版本更新:GPSS 1.6.0和GPCC 6.5已发布

本文主要是介绍【青梅快讯】Greenplum关键组件版本更新:GPSS 1.6.0和GPCC 6.5已发布,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

99107bf9-cdb3-41c5-9415-172916e58108.jpg

Greenplum商业版具有众多扩展组件来帮助用户更便捷的使用Greenplum,其中Greenplum监控管理平台GPCC和数据加载解决方案GPSS均是其中关键组件之一,在过去的一个月中,GPSS和GPCC均进行了版本更新,现在让我们带大家了解一下,新版本的GPSS和GPCC都带来了哪些新功能。


GPSS (Greenplum stream server) 1.6.0 发布



GPSS 1.6.0已于5日28日正式发布。Greenplum Stream Server(简称GPSS)是Greenplum下一代数据加载解决方案,能将不同源端的增量数据同步到Greenplum中。


GPSS 1.6.0 新功能


  1. gpss增加-c选项, 用于指定配置文件路径

  2. gpsscli的--version参数也会打印gpss server的版本信息

  3. gpss和gpsscli日志支持--color和--csv格式, 默认为空格分隔的文本格式

  4. gpss的Kafka job配置新增IDLE_DURATION 参数, 当超过IDLE_DURATION 时间后对应的kafka topic中没有新消息, GPSS将会释放目标表的锁

  5. gpss新增SCHEMA_PATH_ON_GPDB 参数, 支持从Greenplum集群的segment节点上获取avro的schema

  6. gpss新增FALLBACK_OFFSET 参数, 可以设置当消息的offset不连续时(未及时加载就被清空)时,从何处继续加载消息

  7. gpss支持基于HTTPS的scheme service服务

  8. gpss支持了kafka的group.id 配置, 可通过第三方工具监控加载进度

  9. 除了exactly once, gpss支持最多一次和最少一次一致性保证

  10. gpss支持通过custom formatter方式实现自定义消息格式


实验功能


  1. gpss新增了RECOVER_FAILING_BATCH 配置, 可以将Greenplum无法处理的事务中的错误数据暂存

  2. gpss组件增加了新的dataflow extension, 包含gp_jsonb数据类型和text_in formatter


GPCC(Greenplum Command Center) 6.5发布



GPCC 6.5已于5月31日正式发布。Greenplum Command Center 6.5 为 Tanzu Greenplum Database 6 提供管理和监控功能。


Greenplum Command Center 6.5 与以下平台兼容。


  • Tanzu Greenplum 数据库 6.x。

  • Redhat 企业版 Linux 6.x1 和 7.x

  • CentOS 6.x1 和 7.x

  • SUSE 企业版 Linux 12

  • Ubuntu 18.04


有关最新的兼容性信息,请参阅 Tanzu Greenplum Command Center支持平台相关文档:https://gpcc.docs.pivotal.io/supported-platforms/gpcc.html)


GPCC 6.5版本增强功能


  1. 查询监视器(Query Monitor)页面现允许用户根据查询的状态(正在运行、已排队或已阻止)过滤显示的查询。更多信息,请参阅查询监视器文档(https://gpcc.docs.pivotal.io/650/topics/ui/query-monitor.html)。
  2. 查询监视器页面现包含高级搜索工具。该工具允许用户根据查询指标(例如查询 ID、数据库名称、资源组等)过滤显示的查询。有关更多信息,请参阅查询监视器文档页面(https://gpcc.docs.pivotal.io/650/topics/ui/query-monitor.html)。
  3. 用户现在可以暂停查询监视器以查看查询的快照。有关更多信息,请参阅查询监视器文档页面(https://gpcc.docs.pivotal.io/650/topics/ui/query-monitor.html)
  4. 查询监视器现在显示有关会话的各种信息,例如会话状态、关联的用户和数据库、空闲时间和关联的查询等。具有管理员或操作员权限的用户可以查看和取消所有用户的会话,以及将会话详细信息导出到 CSV 文件。有关更多信息,请参阅查询监视器文档页面(https://gpcc.docs.pivotal.io/650/topics/ui/query-monitor.html)。
  5. 实时查询详细信息页面现在可以显示查询的查询标签。
  6. 查询历史详情页面现在可以显示查询的查询标签。
  7. 在历史记录页面上,高级搜索工具现在允许用户过滤查询的查询标签。有关更多信息,请参阅历史文档页面。(https://gpcc.docs.pivotal.io/650/topics/ui/history.html)
  8. 用户可以创建工作负载规则来终止空闲会话,并可以检查终止会话的规则日志。有关更多信息,请参阅工作负载管理文档页面。(https://gpcc.docs.pivotal.io/650/topics/ui/workload-management.html)
  9. 用户可以通过溢出文件大小创建规则。有关更多信息,请参阅工作负载管理文档页面。(https://gpcc.docs.pivotal.io/650/topics/ui/workload-management.html)
  10. gpmetrics 模式包含一个新的 gpmetrics.gpcc_queries_now 表,用于存储实时查询指标数据。
  11. gpcc_wlm_rule 表增加了两行:一个用于存储空闲会话终止规则的参数,另一个用于存储溢出文件大小。更多信息,请参阅gpmetrics 架构参考文档(https://gpcc.docs.pivotal.io/650/topics/ref-gpmetrics.html)
  12. Greenplum Command Center将不再支持Microsoft IE 浏览器。






点击文末“ 阅读原文 ”,获取Greenplum中文资源。


948981c9-4b75-43ef-a530-6629d24fde46.gif

24470e06-573b-42f2-9f5a-d5a53fe69178.png来一波 “在看”、“分享”和 “赞” 吧!


本文分享自微信公众号 - Greenplum中文社区(GreenplumCommunity)。
如有侵权,请联系 support@oschina.cn 删除。
本文参与“OSC源创计划”,欢迎正在阅读的你也加入,一起分享。

这篇关于【青梅快讯】Greenplum关键组件版本更新:GPSS 1.6.0和GPCC 6.5已发布的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/363657

相关文章

你的华为手机升级了吗? 鸿蒙NEXT多连推5.0.123版本变化颇多

《你的华为手机升级了吗?鸿蒙NEXT多连推5.0.123版本变化颇多》现在的手机系统更新可不仅仅是修修补补那么简单了,华为手机的鸿蒙系统最近可是动作频频,给用户们带来了不少惊喜... 为了让用户的使用体验变得很好,华为手机不仅发布了一系列给力的新机,还在操作系统方面进行了疯狂的发力。尤其是近期,不仅鸿蒙O

什么是 Ubuntu LTS?Ubuntu LTS和普通版本区别对比

《什么是UbuntuLTS?UbuntuLTS和普通版本区别对比》UbuntuLTS是Ubuntu操作系统的一个特殊版本,旨在提供更长时间的支持和稳定性,与常规的Ubuntu版本相比,LTS版... 如果你正打算安装 Ubuntu 系统,可能会被「LTS 版本」和「普通版本」给搞得一头雾水吧?尤其是对于刚入

Ubuntu 24.04 LTS怎么关闭 Ubuntu Pro 更新提示弹窗?

《Ubuntu24.04LTS怎么关闭UbuntuPro更新提示弹窗?》Ubuntu每次开机都会弹窗提示安全更新,设置里最多只能取消自动下载,自动更新,但无法做到直接让自动更新的弹窗不出现,... 如果你正在使用 Ubuntu 24.04 LTS,可能会注意到——在使用「软件更新器」或运行 APT 命令时,

windows端python版本管理工具pyenv-win安装使用

《windows端python版本管理工具pyenv-win安装使用》:本文主要介绍如何通过git方式下载和配置pyenv-win,包括下载、克隆仓库、配置环境变量等步骤,同时还详细介绍了如何使用... 目录pyenv-win 下载配置环境变量使用 pyenv-win 管理 python 版本一、安装 和

JS常用组件收集

收集了一些平时遇到的前端比较优秀的组件,方便以后开发的时候查找!!! 函数工具: Lodash 页面固定: stickUp、jQuery.Pin 轮播: unslider、swiper 开关: switch 复选框: icheck 气泡: grumble 隐藏元素: Headroom

高效+灵活,万博智云全球发布AWS无代理跨云容灾方案!

摘要 近日,万博智云推出了基于AWS的无代理跨云容灾解决方案,并与拉丁美洲,中东,亚洲的合作伙伴面向全球开展了联合发布。这一方案以AWS应用环境为基础,将HyperBDR平台的高效、灵活和成本效益优势与无代理功能相结合,为全球企业带来实现了更便捷、经济的数据保护。 一、全球联合发布 9月2日,万博智云CEO Michael Wong在线上平台发布AWS无代理跨云容灾解决方案的阐述视频,介绍了

poj3468(线段树成段更新模板题)

题意:包括两个操作:1、将[a.b]上的数字加上v;2、查询区间[a,b]上的和 下面的介绍是下解题思路: 首先介绍  lazy-tag思想:用一个变量记录每一个线段树节点的变化值,当这部分线段的一致性被破坏我们就将这个变化值传递给子区间,大大增加了线段树的效率。 比如现在需要对[a,b]区间值进行加c操作,那么就从根节点[1,n]开始调用update函数进行操作,如果刚好执行到一个子节点,

hdu1394(线段树点更新的应用)

题意:求一个序列经过一定的操作得到的序列的最小逆序数 这题会用到逆序数的一个性质,在0到n-1这些数字组成的乱序排列,将第一个数字A移到最后一位,得到的逆序数为res-a+(n-a-1) 知道上面的知识点后,可以用暴力来解 代码如下: #include<iostream>#include<algorithm>#include<cstring>#include<stack>#in

hdu1689(线段树成段更新)

两种操作:1、set区间[a,b]上数字为v;2、查询[ 1 , n ]上的sum 代码如下: #include<iostream>#include<algorithm>#include<cstring>#include<stack>#include<queue>#include<set>#include<map>#include<stdio.h>#include<stdl

如何在页面调用utility bar并传递参数至lwc组件

1.在app的utility item中添加lwc组件: 2.调用utility bar api的方式有两种: 方法一,通过lwc调用: import {LightningElement,api ,wire } from 'lwc';import { publish, MessageContext } from 'lightning/messageService';import Ca