【青梅快讯】Greenplum关键组件版本更新:GPSS 1.6.0和GPCC 6.5已发布

本文主要是介绍【青梅快讯】Greenplum关键组件版本更新:GPSS 1.6.0和GPCC 6.5已发布,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

99107bf9-cdb3-41c5-9415-172916e58108.jpg

Greenplum商业版具有众多扩展组件来帮助用户更便捷的使用Greenplum,其中Greenplum监控管理平台GPCC和数据加载解决方案GPSS均是其中关键组件之一,在过去的一个月中,GPSS和GPCC均进行了版本更新,现在让我们带大家了解一下,新版本的GPSS和GPCC都带来了哪些新功能。


GPSS (Greenplum stream server) 1.6.0 发布



GPSS 1.6.0已于5日28日正式发布。Greenplum Stream Server(简称GPSS)是Greenplum下一代数据加载解决方案,能将不同源端的增量数据同步到Greenplum中。


GPSS 1.6.0 新功能


  1. gpss增加-c选项, 用于指定配置文件路径

  2. gpsscli的--version参数也会打印gpss server的版本信息

  3. gpss和gpsscli日志支持--color和--csv格式, 默认为空格分隔的文本格式

  4. gpss的Kafka job配置新增IDLE_DURATION 参数, 当超过IDLE_DURATION 时间后对应的kafka topic中没有新消息, GPSS将会释放目标表的锁

  5. gpss新增SCHEMA_PATH_ON_GPDB 参数, 支持从Greenplum集群的segment节点上获取avro的schema

  6. gpss新增FALLBACK_OFFSET 参数, 可以设置当消息的offset不连续时(未及时加载就被清空)时,从何处继续加载消息

  7. gpss支持基于HTTPS的scheme service服务

  8. gpss支持了kafka的group.id 配置, 可通过第三方工具监控加载进度

  9. 除了exactly once, gpss支持最多一次和最少一次一致性保证

  10. gpss支持通过custom formatter方式实现自定义消息格式


实验功能


  1. gpss新增了RECOVER_FAILING_BATCH 配置, 可以将Greenplum无法处理的事务中的错误数据暂存

  2. gpss组件增加了新的dataflow extension, 包含gp_jsonb数据类型和text_in formatter


GPCC(Greenplum Command Center) 6.5发布



GPCC 6.5已于5月31日正式发布。Greenplum Command Center 6.5 为 Tanzu Greenplum Database 6 提供管理和监控功能。


Greenplum Command Center 6.5 与以下平台兼容。


  • Tanzu Greenplum 数据库 6.x。

  • Redhat 企业版 Linux 6.x1 和 7.x

  • CentOS 6.x1 和 7.x

  • SUSE 企业版 Linux 12

  • Ubuntu 18.04


有关最新的兼容性信息,请参阅 Tanzu Greenplum Command Center支持平台相关文档:https://gpcc.docs.pivotal.io/supported-platforms/gpcc.html)


GPCC 6.5版本增强功能


  1. 查询监视器(Query Monitor)页面现允许用户根据查询的状态(正在运行、已排队或已阻止)过滤显示的查询。更多信息,请参阅查询监视器文档(https://gpcc.docs.pivotal.io/650/topics/ui/query-monitor.html)。
  2. 查询监视器页面现包含高级搜索工具。该工具允许用户根据查询指标(例如查询 ID、数据库名称、资源组等)过滤显示的查询。有关更多信息,请参阅查询监视器文档页面(https://gpcc.docs.pivotal.io/650/topics/ui/query-monitor.html)。
  3. 用户现在可以暂停查询监视器以查看查询的快照。有关更多信息,请参阅查询监视器文档页面(https://gpcc.docs.pivotal.io/650/topics/ui/query-monitor.html)
  4. 查询监视器现在显示有关会话的各种信息,例如会话状态、关联的用户和数据库、空闲时间和关联的查询等。具有管理员或操作员权限的用户可以查看和取消所有用户的会话,以及将会话详细信息导出到 CSV 文件。有关更多信息,请参阅查询监视器文档页面(https://gpcc.docs.pivotal.io/650/topics/ui/query-monitor.html)。
  5. 实时查询详细信息页面现在可以显示查询的查询标签。
  6. 查询历史详情页面现在可以显示查询的查询标签。
  7. 在历史记录页面上,高级搜索工具现在允许用户过滤查询的查询标签。有关更多信息,请参阅历史文档页面。(https://gpcc.docs.pivotal.io/650/topics/ui/history.html)
  8. 用户可以创建工作负载规则来终止空闲会话,并可以检查终止会话的规则日志。有关更多信息,请参阅工作负载管理文档页面。(https://gpcc.docs.pivotal.io/650/topics/ui/workload-management.html)
  9. 用户可以通过溢出文件大小创建规则。有关更多信息,请参阅工作负载管理文档页面。(https://gpcc.docs.pivotal.io/650/topics/ui/workload-management.html)
  10. gpmetrics 模式包含一个新的 gpmetrics.gpcc_queries_now 表,用于存储实时查询指标数据。
  11. gpcc_wlm_rule 表增加了两行:一个用于存储空闲会话终止规则的参数,另一个用于存储溢出文件大小。更多信息,请参阅gpmetrics 架构参考文档(https://gpcc.docs.pivotal.io/650/topics/ref-gpmetrics.html)
  12. Greenplum Command Center将不再支持Microsoft IE 浏览器。






点击文末“ 阅读原文 ”,获取Greenplum中文资源。


948981c9-4b75-43ef-a530-6629d24fde46.gif

24470e06-573b-42f2-9f5a-d5a53fe69178.png来一波 “在看”、“分享”和 “赞” 吧!


本文分享自微信公众号 - Greenplum中文社区(GreenplumCommunity)。
如有侵权,请联系 support@oschina.cn 删除。
本文参与“OSC源创计划”,欢迎正在阅读的你也加入,一起分享。

这篇关于【青梅快讯】Greenplum关键组件版本更新:GPSS 1.6.0和GPCC 6.5已发布的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!


原文地址:https://blog.csdn.net/gp_community/article/details/117777906
本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.chinasem.cn/article/363657

相关文章

MySQL更新某个字段拼接固定字符串的实现

《MySQL更新某个字段拼接固定字符串的实现》在MySQL中,我们经常需要对数据库中的某个字段进行更新操作,本文就来介绍一下MySQL更新某个字段拼接固定字符串的实现,感兴趣的可以了解一下... 目录1. 查看字段当前值2. 更新字段拼接固定字符串3. 验证更新结果mysql更新某个字段拼接固定字符串 -

浅谈配置MMCV环境,解决报错,版本不匹配问题

《浅谈配置MMCV环境,解决报错,版本不匹配问题》:本文主要介绍浅谈配置MMCV环境,解决报错,版本不匹配问题,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录配置MMCV环境,解决报错,版本不匹配错误示例正确示例总结配置MMCV环境,解决报错,版本不匹配在col

微信公众号脚本-获取热搜自动新建草稿并发布文章

《微信公众号脚本-获取热搜自动新建草稿并发布文章》本来想写一个自动化发布微信公众号的小绿书的脚本,但是微信公众号官网没有小绿书的接口,那就写一个获取热搜微信普通文章的脚本吧,:本文主要介绍微信公众... 目录介绍思路前期准备环境要求获取接口token获取热搜获取热搜数据下载热搜图片给图片加上标题文字上传图片

Linux卸载自带jdk并安装新jdk版本的图文教程

《Linux卸载自带jdk并安装新jdk版本的图文教程》在Linux系统中,有时需要卸载预装的OpenJDK并安装特定版本的JDK,例如JDK1.8,所以本文给大家详细介绍了Linux卸载自带jdk并... 目录Ⅰ、卸载自带jdkⅡ、安装新版jdkⅠ、卸载自带jdk1、输入命令查看旧jdkrpm -qa

SpringKafka消息发布之KafkaTemplate与事务支持功能

《SpringKafka消息发布之KafkaTemplate与事务支持功能》通过本文介绍的基本用法、序列化选项、事务支持、错误处理和性能优化技术,开发者可以构建高效可靠的Kafka消息发布系统,事务支... 目录引言一、KafkaTemplate基础二、消息序列化三、事务支持机制四、错误处理与重试五、性能优

Tomcat版本与Java版本的关系及说明

《Tomcat版本与Java版本的关系及说明》:本文主要介绍Tomcat版本与Java版本的关系及说明,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录Tomcat版本与Java版本的关系Tomcat历史版本对应的Java版本Tomcat支持哪些版本的pythonJ

新特性抢先看! Ubuntu 25.04 Beta 发布:Linux 6.14 内核

《新特性抢先看!Ubuntu25.04Beta发布:Linux6.14内核》Canonical公司近日发布了Ubuntu25.04Beta版,这一版本被赋予了一个活泼的代号——“Plu... Canonical 昨日(3 月 27 日)放出了 Beta 版 Ubuntu 25.04 系统镜像,代号“Pluc

MySQL新增字段后Java实体未更新的潜在问题与解决方案

《MySQL新增字段后Java实体未更新的潜在问题与解决方案》在Java+MySQL的开发中,我们通常使用ORM框架来映射数据库表与Java对象,但有时候,数据库表结构变更(如新增字段)后,开发人员可... 目录引言1. 问题背景:数据库与 Java 实体不同步1.1 常见场景1.2 示例代码2. 不同操作

Vue中组件之间传值的六种方式(完整版)

《Vue中组件之间传值的六种方式(完整版)》组件是vue.js最强大的功能之一,而组件实例的作用域是相互独立的,这就意味着不同组件之间的数据无法相互引用,针对不同的使用场景,如何选择行之有效的通信方式... 目录前言方法一、props/$emit1.父组件向子组件传值2.子组件向父组件传值(通过事件形式)方

IDEA中Git版本回退的两种实现方案

《IDEA中Git版本回退的两种实现方案》作为开发者,代码版本回退是日常高频操作,IntelliJIDEA集成了强大的Git工具链,但面对reset和revert两种核心回退方案,许多开发者仍存在选择... 目录一、版本回退前置知识二、Reset方案:整体改写历史1、IDEA图形化操作(推荐)1.1、查看提