Neutron重试操作

2023-12-19 10:18
文章标签 操作 重试 neutron

本文主要是介绍Neutron重试操作,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

在neutron.db.api模块内部有一个修饰符叫做“retry_if_session_inactive”。其应用于保护所有执行DB操作的方法。此修饰符将获取它所保护的方法抛出的任何的死锁错误、RetryRequests、连接错误和单一限制破坏。

如果应用的方法在活动会话中调用,此修饰符不会重试操作。这是因为它捕获的大多数异常将会话部分的转到回滚状态,以至于其不再可用。重要的是保证有一个处于事务开始之外的修饰符。如果方法在另外一个事务中被调用,此修饰符可进行嵌套。

如果被包含的方法,没有使用上下文作为参数,“retry_db_errors”描述符方法可被使用。其重试相同的异常,并且与“retry_if_session_active”具有相同的反嵌套行为,但是其不检查会话是否连接了任何上下文关键字(“retry_if_session_active”在检查完会话之后,内部只是使用“retry_db_errors”)。

失败时的等幂性 Idempotency on Failures

当遇到异常时,被修饰的方法应当总是执行清空,以便可安全的重试操作。所以如果一个方法创建DB对象、提交、之后创建另一个对象,如果第二个失败,方法必须清除第一个创建的DB对象。假设任何DB操作都可抛出可重试的错误。

你也许能看到Neutron内的API 层的重试修饰符。尽管如此,我们试着消除它们,因为每个API操作有着许多独立的步骤,是的保证在部分失败上的等幂性非常困难。

参数突变 Argument Mutation

一个修饰的函数不应改变传入的复杂参数。如果改变,应由异常处理函数可反转此改变,以便可安全的进行重试操作。

修饰符将自动的创建通过它传入的sets、lists和dicts的深度拷贝,但是它不处理其它的参数。

尝试处理竞争条件 Race Conditions

检测带有单个限制来创建DB记录的竞争条件的困难之一是,要决定在哪里放置异常处理函数,因为限制违规可能在flush时立即发生,或者直到在会话上下文管理器退出时事务被提交之后才发生。所以最终我们实现的代码类似与如下:

  def create_port(context, ip_address, mac_address):_ensure_mac_not_in_use(context, mac_address)_ensure_ip_not_in_use(context, ip_address)try:with context.session.begin():port_obj = Port(ip=ip_address, mac=mac_address)do_expensive_thing(...)do_extra_other_thing(...)return port_objexcept DBDuplicateEntry as e:# code to parse columnsif 'mac' in e.columns:raise MacInUse(mac_address)if 'ip' in e.columns:raise IPAddressInUse(ip)def _ensure_mac_not_in_use(context, mac):if context.session.query(Port).filter_by(mac=mac).count():raise MacInUse(mac)def _ensure_ip_not_in_use(context, ip):if context.session.query(Port).filter_by(ip=ip).count():raise IPAddressInUse(ip)

所以,我们实现的异常处理函数,需要理解事情出错在哪里,并将其转为对最终用户而言合适的异常。这明显偏离了创建端口的主要目的。

既然重试修饰符将自动为我们捕获并重试DB重复错误,我们可允许它在竞争条件上重试,其将授予原始的验证逻辑去重新执行,并触发合适的错误。这将保持验证逻辑处于一个地方,是代码更简洁。

  from neutron.db import api as db_api@db_api.retry_if_session_inactive()def create_port(context, ip_address, mac_address):_ensure_mac_not_in_use(context, mac_address)_ensure_ip_not_in_use(context, ip_address)with context.session.begin():port_obj = Port(ip=ip_address, mac=mac_address)do_expensive_thing(...)do_extra_other_thing(...)return port_objdef _ensure_mac_not_in_use(context, mac):if context.session.query(Port).filter_by(mac=mac).count():raise MacInUse(mac)def _ensure_ip_not_in_use(context, ip):if context.session.query(Port).filter_by(ip=ip).count():raise IPAddressInUse(ip)

嵌套

一旦修饰符尝试某个操作到了最大次数,它将关联一个标记到此其触发的异常,后续可避免此调用方法修饰符再次尝试错误。此阻止了重试次数的指数级增长,如果它们是分层结构的。

用法

这里有一些使用示例:

  from neutron.db import api as db_api@db_api.retry_if_session_inactive()def create_elephant(context, elephant_details):....@db_api.retry_if_session_inactive()def atomic_bulk_create_elephants(context, elephants):with context.session.begin():for elephant in elephants:# note that if create_elephant throws a retriable# exception, the decorator around it will not retry# because the session is active. The decorator around# atomic_bulk_create_elephants will be responsible for# retrying the entire operation.create_elephant(context, elephant)# sample usage when session is attached to a var other than 'context'@db_api.retry_if_session_inactive(context_var_name='ctx')def some_function(ctx):

这篇关于Neutron重试操作的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/511823

相关文章

Python调用Orator ORM进行数据库操作

《Python调用OratorORM进行数据库操作》OratorORM是一个功能丰富且灵活的PythonORM库,旨在简化数据库操作,它支持多种数据库并提供了简洁且直观的API,下面我们就... 目录Orator ORM 主要特点安装使用示例总结Orator ORM 是一个功能丰富且灵活的 python O

python使用fastapi实现多语言国际化的操作指南

《python使用fastapi实现多语言国际化的操作指南》本文介绍了使用Python和FastAPI实现多语言国际化的操作指南,包括多语言架构技术栈、翻译管理、前端本地化、语言切换机制以及常见陷阱和... 目录多语言国际化实现指南项目多语言架构技术栈目录结构翻译工作流1. 翻译数据存储2. 翻译生成脚本

0基础租个硬件玩deepseek,蓝耘元生代智算云|本地部署DeepSeek R1模型的操作流程

《0基础租个硬件玩deepseek,蓝耘元生代智算云|本地部署DeepSeekR1模型的操作流程》DeepSeekR1模型凭借其强大的自然语言处理能力,在未来具有广阔的应用前景,有望在多个领域发... 目录0基础租个硬件玩deepseek,蓝耘元生代智算云|本地部署DeepSeek R1模型,3步搞定一个应

轻松上手MYSQL之JSON函数实现高效数据查询与操作

《轻松上手MYSQL之JSON函数实现高效数据查询与操作》:本文主要介绍轻松上手MYSQL之JSON函数实现高效数据查询与操作的相关资料,MySQL提供了多个JSON函数,用于处理和查询JSON数... 目录一、jsON_EXTRACT 提取指定数据二、JSON_UNQUOTE 取消双引号三、JSON_KE

C++实现封装的顺序表的操作与实践

《C++实现封装的顺序表的操作与实践》在程序设计中,顺序表是一种常见的线性数据结构,通常用于存储具有固定顺序的元素,与链表不同,顺序表中的元素是连续存储的,因此访问速度较快,但插入和删除操作的效率可能... 目录一、顺序表的基本概念二、顺序表类的设计1. 顺序表类的成员变量2. 构造函数和析构函数三、顺序表

使用C++实现单链表的操作与实践

《使用C++实现单链表的操作与实践》在程序设计中,链表是一种常见的数据结构,特别是在动态数据管理、频繁插入和删除元素的场景中,链表相比于数组,具有更高的灵活性和高效性,尤其是在需要频繁修改数据结构的应... 目录一、单链表的基本概念二、单链表类的设计1. 节点的定义2. 链表的类定义三、单链表的操作实现四、

Python利用自带模块实现屏幕像素高效操作

《Python利用自带模块实现屏幕像素高效操作》这篇文章主要为大家详细介绍了Python如何利用自带模块实现屏幕像素高效操作,文中的示例代码讲解详,感兴趣的小伙伴可以跟随小编一起学习一下... 目录1、获取屏幕放缩比例2、获取屏幕指定坐标处像素颜色3、一个简单的使用案例4、总结1、获取屏幕放缩比例from

通过prometheus监控Tomcat运行状态的操作流程

《通过prometheus监控Tomcat运行状态的操作流程》文章介绍了如何安装和配置Tomcat,并使用Prometheus和TomcatExporter来监控Tomcat的运行状态,文章详细讲解了... 目录Tomcat安装配置以及prometheus监控Tomcat一. 安装并配置tomcat1、安装

Python中操作Redis的常用方法小结

《Python中操作Redis的常用方法小结》这篇文章主要为大家详细介绍了Python中操作Redis的常用方法,文中的示例代码简洁易懂,具有一定的借鉴价值,有需要的小伙伴可以了解一下... 目录安装Redis开启、关闭Redisredis数据结构redis-cli操作安装redis-py数据库连接和释放增

Go语言利用泛型封装常见的Map操作

《Go语言利用泛型封装常见的Map操作》Go语言在1.18版本中引入了泛型,这是Go语言发展的一个重要里程碑,它极大地增强了语言的表达能力和灵活性,本文将通过泛型实现封装常见的Map操作,感... 目录什么是泛型泛型解决了什么问题Go泛型基于泛型的常见Map操作代码合集总结什么是泛型泛型是一种编程范式,允