列生成(column generation)的应用问题

2024-04-21 20:08

本文主要是介绍列生成(column generation)的应用问题,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

当我们讨论列生成算法,一定要了解一个经典问题——木材下料问题(The cutting stock problem),最初问题的形式为线性规划,相关的问题解析有很多:

优化 | 从集合划分问题到列生成算法

单纯形法和列生成算法解释

线性规划技巧: 列生成(Column Generation)

列生成算法求解矩形下料问题(Matlab代码)

列生成和分支定价

从木材下料问题向外拓展,列生成算法也被用于大规模的线性规划问题,这些问题有以下特征:

  • 大规模意味着变量特别多,很难一次性完全的考虑进来;
  • 只有一小部分变量值是非零的(基变量),大部分变量值为零(非基变量);
  • 只有部分变量可以改善目标函数。

这篇文章主要想把重心放在,当应用列生成算法时会遇到的一些问题及可能的解决方案。

抽象来说,列生成的思路是在子区域(只包含部分列)先生成一个MVP(也就是可行但不是最优的策略),再去寻找可能减少差额成本/非基变量检验数(reduced cost)的列,可行的话就将这个列加入原本的策略中(微调策略)并更新所有列的cost,继续迭代寻找,直到找到最优的策略。

具体来说,在确定要解决的主问题(MP)之后,需要进行几个关键步骤:

  1. 分解问题(Master Problem,MP)为限制主问题(Restricted Master Problem,RMP)与估价问题/子问题(Pricing Problem,PP);
  2. 在每次迭代中,PP通过reduce cost(dual cost)来判断是否有RMP中未涉及到的列(column/independent set)可以改善整个策略。
  3. 如果有则将这个列与cost一同加入当前的RMP,重新计算cost。
  4. 一直迭代到目标函数接近最优。

所以,这个过程中将会涉及到很多个具体问题:

  • 如何拆分原主问题(MP)?
  • 列如何定义?
  • reduce cost如何定义?
  • 最开始的子区域是如何选择的?
  • 如何迭代求解最优的策略?
  • 如何判断其接近最优?

而且,即使是这样的整数线性规划问题,随着问题规模的增大,求解的时间也会是难以接受的。如何尽量减少求解的时间?

实际生活中,遇到的问题也并不如木材下料问题那么规整,可能伴随着大量显式或隐式的constraint,我们又如何处理它们?

如何拆分原主问题(MP)?列如何定义?

这两个问题几乎是等价的,当你确定了列的定义,也就知道如何拆分主问题了,因为所求的RMP形式上一般都满足求某个子区域内的向量的线性组合,这个向量一般就是列生成算法中所说的“列”。

所以列可以理解为是最终策略的一个元素,而最终策略,需要集合多种不同的元素达到最优化。换言之,如果最终想要得到的方案一般是一个整体的优化方案,比如最大流问题,路径规划问题等。

有些情况下,列的定义可以是与时间t相关的函数,这种方法比较取巧。

有些问题的拆分是逻辑上自然而然的,因为很容易找到有现成求解办法又使问题规模变小的RMP。比如在木材下料问题中,主问题是最小化切割方案的cost,cost被定义为浪费的木材长度。一条固定长度的木材的切割方案自然地可以通过穷举来得到。所以MP被转化为了选择切割方案的线性组合,这是典型的线性规划问题。切割方案也就是列,组合的weight自然与cost(所浪费的木材长度)所挂钩。

但在一些问题上,RMP和PP的定义是相当困难的。不一定一开始就能找到所有的方案再从中寻找,而是需要特殊的Price model去限制。

reduce cost如何定义?

通常,想要找到这个reduce cost要通过对偶理论来实现。

找到reduce cost之后就可以定义Price model。当然也有特殊结构的price model,个人认为这是整个算法中最难定义的一部分。具体怎么实现,目前还没有完全参透,先留一个坑,之后来填。

最开始的子区域是如何选择的?

在大部分情况下,最初的区域(initial set)是不会影响最终的优化结果,但它在一定程度上会影响整个算法收敛的速度。

如果最初的区域很小很简单,算法在一开始的迭代过程中将很容易提升,lower bound与upper bound的gap将很快缩小。

如何迭代求解最优的策略?

不停地向RMP加入新的列,再求解RMP。

其中,求解RMP的方法可以是任何算法,只要可以找到reduce cost为负的可行解就行。一般建模为哪类问题,就用哪类问题的常规解法即可。

但是,也存在退化现象,也就是说原问题的对偶问题的对偶最优解不是唯一的,找到的列往往不能改善目标函数值。减少退化现象的影响之一就是不使用对偶问题的基解而是使用对偶问题定义域中的内点解。

可以考虑一次加很多列减弱退化,不需要每次都求到最小的reduce cost,除了动态规划方法,·也可以涉及启发式的规则去解,只要保证负的就行。

如何判断其接近最优?

直到子问题的解全部为非负,则为整体收敛了。

但很多情况下,由于问题规模太大,当迭代到非负时,已经耗费了大量的时间与计算资源了。此时,可以用各种bounded算法去限制计算的精度,常用的有\epsilon-bounded。

 

 

这篇关于列生成(column generation)的应用问题的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/923932

相关文章

linux生产者,消费者问题

pthread_cond_wait() :用于阻塞当前线程,等待别的线程使用pthread_cond_signal()或pthread_cond_broadcast来唤醒它。 pthread_cond_wait() 必须与pthread_mutex 配套使用。pthread_cond_wait()函数一进入wait状态就会自动release mutex。当其他线程通过pthread

问题:第一次世界大战的起止时间是 #其他#学习方法#微信

问题:第一次世界大战的起止时间是 A.1913 ~1918 年 B.1913 ~1918 年 C.1914 ~1918 年 D.1914 ~1919 年 参考答案如图所示

2024.6.24 IDEA中文乱码问题(服务器 控制台 TOMcat)实测已解决

1.问题产生原因: 1.文件编码不一致:如果文件的编码方式与IDEA设置的编码方式不一致,就会产生乱码。确保文件和IDEA使用相同的编码,通常是UTF-8。2.IDEA设置问题:检查IDEA的全局编码设置和项目编码设置是否正确。3.终端或控制台编码问题:如果你在终端或控制台看到乱码,可能是终端的编码设置问题。确保终端使用的是支持你的文件的编码方式。 2.解决方案: 1.File -> S

vcpkg安装opencv中的特殊问题记录(无法找到opencv_corexd.dll)

我是按照网上的vcpkg安装opencv方法进行的(比如这篇:从0开始在visual studio上安装opencv(超详细,针对小白)),但是中间出现了一些别人没有遇到的问题,虽然原因没有找到,但是本人给出一些暂时的解决办法: 问题1: 我在安装库命令行使用的是 .\vcpkg.exe install opencv 我的电脑是x64,vcpkg在这条命令后默认下载的也是opencv2:x6

问题-windows-VPN不正确关闭导致网页打不开

为什么会发生这类事情呢? 主要原因是关机之前vpn没有关掉导致的。 至于为什么没关掉vpn会导致网页打不开,我猜测是因为vpn建立的链接没被更改。 正确关掉vpn的时候,会把ip链接断掉,如果你不正确关掉,ip链接没有断掉,此时你vpn又是没启动的,没有域名解析,所以就打不开网站。 你可以在打不开网页的时候,把vpn打开,你会发现网络又可以登录了。 方法一 注意:方法一虽然方便,但是可能会有

亮相WOT全球技术创新大会,揭秘火山引擎边缘容器技术在泛CDN场景的应用与实践

2024年6月21日-22日,51CTO“WOT全球技术创新大会2024”在北京举办。火山引擎边缘计算架构师李志明受邀参与,以“边缘容器技术在泛CDN场景的应用和实践”为主题,与多位行业资深专家,共同探讨泛CDN行业技术架构以及云原生与边缘计算的发展和展望。 火山引擎边缘计算架构师李志明表示:为更好地解决传统泛CDN类业务运行中的问题,火山引擎边缘容器团队参考行业做法,结合实践经验,打造火山

android 带与不带logo的二维码生成

该代码基于ZXing项目,这个网上能下载得到。 定义的控件以及属性: public static final int SCAN_CODE = 1;private ImageView iv;private EditText et;private Button qr_btn,add_logo;private Bitmap logo,bitmap,bmp; //logo图标private st

自制的浏览器主页,可以是最简单的桌面应用,可以把它当成备忘录桌面应用

自制的浏览器主页,可以是最简单的桌面应用,可以把它当成备忘录桌面应用。如果你看不懂,请留言。 完整代码: <!DOCTYPE html><html lang="zh-CN"><head><meta charset="UTF-8"><meta name="viewport" content="width=device-width, initial-scale=1.0"><ti

vue同页面多路由懒加载-及可能存在问题的解决方式

先上图,再解释 图一是多路由页面,图二是路由文件。从图一可以看出每个router-view对应的name都不一样。从图二可以看出层路由对应的组件加载方式要跟图一中的name相对应,并且图二的路由层在跟图一对应的页面中要加上components层,多一个s结尾,里面的的方法名就是图一路由的name值,里面还可以照样用懒加载的方式。 页面上其他的路由在路由文件中也跟图二是一样的写法。 附送可能存在

vue+elementui--$message提示框被dialog遮罩层挡住问题解决

最近碰到一个先执行this.$message提示内容,然后接着弹出dialog带遮罩层弹框。那么问题来了,message提示框会默认被dialog遮罩层挡住,现在就是要解决这个问题。 由于都是弹框,问题肯定是出在z-index比重问题。由于用$message方式是写在js中而不是写在html中所以不是很好直接去改样式。 不过好在message组件中提供了customClass 属性,我们可以利用