本文主要是介绍Hudi Spark Sql Procedures 回滚 Hudi 表数据,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!
前言
因为有 Hudi Rollback 的需求,所以单独总结 Hudi Spark Sql Procedures Rollback。
版本
- Hudi 0.13.0(发现有bug)、(然后升级)0.14.1
- Spark 3.2.3
Procedures
官方文档:https://hudi.apache.org/docs/procedures
相关阅读:Hudi Spark SQL Call Procedures学习总结(一)(查询统计表文件信息)
Rollback
官方文档:https://hudi.apache.org/docs/rollbacks
回滚数据,可以回滚到至上一个commit(成功的),也可以回滚到指定 commit (savepoint)。本文暂不涉及savepoint,只总结 回滚到上一个 commit。
-
自动回滚:默认写任务时会自动触发回滚:
rollbackFailedWrites
。
每次写数据前会先检测上一个commit是否完成,如
这篇关于Hudi Spark Sql Procedures 回滚 Hudi 表数据的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!