zkVM设计性能分析

2023-10-05 19:06
文章标签 分析 设计 性能 zkvm

本文主要是介绍zkVM设计性能分析,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

1. 引言

本文主要参考:

  • 2023年9月ZKSummit10 Wei Dai @1k(x) & Terry Chung @1k(x)分享视频 ZK10: Analysis of zkVM Designs - Wei Dai & Terry Chung

当前有各种zkVM,其设计思想各有不同,且各有取舍,本文重点对现有各zkVM设计进行分析。
zkVMs寒武纪大爆发:
在这里插入图片描述

  • 2020年之前的zkVM方案均是学术性的,不具备实用性,具体有:
    • TinyRAM(2013年)
    • vnTinyRAM
    • Buffet
    • Geppetto
    • Spice等
  • 2021年之后开始有商业化的zkVM方案,特别是近两年来各种zkVM方案开始大爆发,有:
    • Cairo-VM
    • Risc-Zero
    • zkSyncVM
    • polygon zkEVM
    • Scroll zkEVM
    • Delphinus zkWasm
    • Valida
    • Triton VM
    • powdr risc-v
    • Fluent zkWasm
    • Jolt
    • polygon Miden等

本文内容框架为:

  • 何为zkVMs?为何需要zkVMs?
  • zkVM设计性能分析:
    • ISA性能分析
    • Arithmetization性能分析
    • Proof system性能分析
  • 结论及开放性问题

2. 何为zkVMs?为何需要zkVMs?

2.1 为何需要zkVMs?

zk Circuits vs. zkVMs:
在这里插入图片描述

  • 编程语言:zk Circuits通常采用Circom、HDL等面向领域编程语言编写;而zkVMs采用Rust、WASM、Risc-V、LLVM等高级通用语言编写。
  • 易用性及生态:难于用zk Circuits来表达具有很多分支的复杂逻辑;而zkVMs的程序有大量现有可靠的软件。
  • 性能:zk Circuits性能较高,因其对特定计算的约束进行了手动调优;而zkVMs性能要慢约10~100倍。本文重点关注的是如何提升zkVMs的性能。

2.2 何为VMs?

虚拟机采用指令集架构(Instruction set architecture,ISA),即:

  • 具有固定语义的一组有限数量的指令集。

在这里插入图片描述

虚拟机(Virtual Machine,VM)的主要结构有:

  • 程序:由指令序列组成。虚拟机每次仅读取程序中的一条指令。
  • 内存
  • 虚拟机:主要工作为:
    • 1)读取输入
    • 2)对内存(RAM)读写
    • 3)修改本地机器状态:内部机器状态为:Stack和(或)Registers。
    • 4)写输出
    • 5)中止执行

现有的VM/zkVM架构,以及内部机器状态内存模型,选型情况为:
在这里插入图片描述

2.2.1 VM选择——Harvard架构 vs. Von Neumann架构

前序博客见:

  • 哈佛架构 VS 冯·诺依曼架构

在做zkVM设计时,对应虚拟机(VM)架构通常需考虑在哈佛架构 和 冯·诺依曼架构 之间二选一:

  • 哈佛架构:程序和内存分属不同区域。
    • 优点为:
      • 无program loader
      • 仅lookup table需要额外的cycles。
    • 缺点为:
      • 无JIT
      • per program setup(需对每个程序做setup)
  • 冯·诺依曼架构:程序在内存中。
    • 优点为:
      • 通用,更接近现代CPUs
    • 缺点为:
      • 必须约束所取指令的正确性
      • 需要program loader(来将程序加载到内存中), 意味着需要更多cycles

在这里插入图片描述

2.2.2 VM内部机器状态内存模型选择——Stack, Register, vs. Direct Memory

虚拟机内部机器状态内存模型,通常有3种选择:

  • 1)Stack Machine:通过访问stack top来进行数据移动,指令更简单。如:
    • EVM
    • Miden-asm
    • Wasm
  • 2)Register Machine:指令比Stack Machine要短,但更复杂,不过数据移动操作要少的多。如:
    • RISC-V
  • 3)Direct Memory Machine:无需数据移动(zero data movement),但有更多的读写操作。如:
    • LLVM-IR
      在这里插入图片描述
      在这里插入图片描述
      三种虚拟机内部机器状态内存模型的性能对比为:
      在这里插入图片描述

2.3 何为zkVMs?

zkVM的目的在于:

  • 给定初始程序、初始程序输入、初始内部机器状态,证明以上VM的有效执行。

zkVMs主要分为四大阶段:

  • 1)Setup阶段:根据参数(如最大trace行数、固定列数、哈希函数等),获得Proving key和Verification key。

  • 2)生成Witness阶段:(Executor)根据程序和程序输入,生成execution trace(即witnesses)。该execution trace中包含了:

    • 该程序的执行
    • 以及,帮助约束该执行有效性的额外信息。

    在生成Witness阶段,还包括将程序切分以供后续并行证明的工作。

  • 3)Proving阶段:根据execution trace和Proving key,生成proof。

  • 4)Verification阶段:根据proof和Verification key,生成验证是否通过的结果Y/N。

在这里插入图片描述

3. zkVM设计性能分析

传统虚拟机中,其效率分析的核心思想为:

  • VM效率 约等于 (程序中的指令数 x 执行单条指令用时) ,即:
    T ≈ P中指令数  × time instruction T\approx \text{P中指令数 }\times \frac{\text{time}}{\text{instruction}} TP中指令数 ×instructiontime

当使用zkVM证明某固定、抽象程序P时,借鉴相同的思想:

  • zkVM效率 约等于 (程序中的指令数 x 单条指令的约束复杂度 x 单个约束证明用时) ,即:zkVM证明用时 T T T以如下公式来表示:
    T ≈ P中指令数  × time instruction ≈ P中指令数  × "Constraint complexity" instruction × time "Constraint complexity" \begin{aligned}T &\approx \text{P中指令数 }\times \frac{\text{time}}{\text{instruction}} \\ &\approx\text{P中指令数 }\times \frac{\text{"Constraint complexity"}}{\text{instruction}} \times \frac{\text{time}}{\text{"Constraint complexity"}}\end{aligned} TP中指令数 ×instructiontimeP中指令数 ×instruction"Constraint complexity"×"Constraint complexity"time

其中的“约束”为:

  • 衡量某类proof system复杂度的单位。

取决于所采用的proof system类型,具体的“约束复杂度”是指,如:

  • R1CS约束数
  • 具有固定配置的Plonk电路中的cells数
  • 具有固定depth的GKR电路中的wires数

为此,在对zkVM做性能分析时,将“(程序中的指令数 x 单条指令的约束复杂度 x 单个约束证明用时)”拆分成3个维度来分析,其中:

  • 1)程序中的指令数:对应为ISA(Instruction set architecture)性能分析。
  • 2)单条指令的约束复杂度:对应为Arithmetization性能分析。
  • 3)单个约束证明用时:对应为Proof system性能分析。
    在这里插入图片描述

3.1 ISA性能分析

ISA(Instruction set architecture)性能分析,主要关注的是程序中的指令数。
传统ISA和“ZK ISA”是针对不同的场景进行了优化:

  • 传统ISA为:

    • 内存局限性:处理器具有内存上限。
    • 程序size(如压缩):无法有太多通用寄存器。
    • 执行速度
  • "ZK ISA"为:

    • 每个cycle,一条指令:具有指令上限。
    • 指令大小的影响小:指令可包含更多信息,如引用更多寄存器或本地变量。
    • 证明速度或性能。

在这里插入图片描述
以,在软件中实现SHA256 one-round压缩函数 所需的指令数,为例,不同虚拟机对比情况为:
在这里插入图片描述
其中:

  • 前三种(EVM、Miden-asm、Wasm)为stack machine,具有相对更多的local data movement操作。
  • RISC-V为register machine,具有少得多的local data movement操作。
  • LLVM-IR为direct memory模式,具有虚拟寄存器,从而具有zero data movement。

在这里插入图片描述
在这里插入图片描述
由此可知,实际的ISA性能,取决于所采用的机器内部状态内存模型:

  • 1)Stack machines:具有大量stack操作(数据移动操作)(高达50%~60%)。
  • 2)Register machines:
    • 当寄存器压力低时,其性能好。
    • 当寄存器压力高时(~30%),需要大量的数据移动。
  • 3)Direct memory machines:
    • 消除了local data movement,即无需数据移动。
    • Caveat(警告):可能会导致更复杂的arithmetization?
      在这里插入图片描述

3.2 Arithmetization性能分析

Arithmetization性能分析,关注的是:

  • 单条指令的约束复杂度。

在这里插入图片描述
实际在对Arithmetization性能分析时,主要分为2大块:

  • Segment性能分析
  • “Recursion复杂度”+“Continuation复杂度” 性能分析。

3.2.1 Segment性能分析

算术化是指将对程序执行segment的约束,转换为:

  • Permutation check、
  • Gate check、
  • lookup、
  • Copy check

等组合,然后进一步转换为2大类子约束表达:

  • Zero check
  • Product check

取决于具体所采用的PolyIOP方案,后续的方案以及影响性能的关键运算也有所不同:

  • 单变量PolyIOP:相关方案有Plonk、STARK、Plookup等,对应为Quotient check,影响性能的关键运算为FFT。
  • 多变量PolyIOP:相关方案有GKR、HyperPlonk、Jolt/Lasso、ProtoStar等,对应为Sum check,影响性能的关键运算为MLE。
    在这里插入图片描述

在这里插入图片描述
以基于STARK的zkVM为例,将程序正确执行的execution trace切分为多个segment。其Prover的证明用时由:

  • 派生多项式,以及对多项式进行承诺

所主导。根据RISC0、Triton、Plonky2所提供的数据:

  • 经典的STARK Provers有60%~80%的证明时长用于派生和commit多项式。
3.2.1.1 STARK VMs vs. SNARK VMs

在这里插入图片描述
当前基于STARK方案的zkVM有:

  • Risc0
  • Miden
  • Cairo
  • Valida
  • Nock
  • TritonVM
  • zkSync VM
  • Polygon zkEVM

这些STARK zkVMs的性能分析对比情况为:【关键数据见最后2列】
在这里插入图片描述
现有的基于SNARK方案的zkVMs,采用的都是基于Halo2的方案,具体有:

  • zkWasm
  • Powdr的Risc-v
  • Scroll的zkEVM

这些SNARK zkVMs性能对比为:
在这里插入图片描述

3.2.2.2 segment性能提升措施

为提升Arithmetization segment性能,其目标应为:

  • 尽可能使,单个指令的committed cells,数量最少。

具体措施有:

  • 1)移除重复的cells。仅对每个指令的“state change”进行commit。
    • 对“non-local” 数据/计算,采用permutation/lookups。
    • powdr risc-v中的寄存器(编码在列中),占约50%的列。
  • 2)采用表达性更好的IOP arguments:
    • fixed lookup tables可改进bitwise运算性能。
    • 改进关键IOP原语的性能,如在单个table中查找 M M M个列集合,采用更好的lookup argument会具有更好的性能:
      在这里插入图片描述
  • 3)具有“flexible area”的co-processors,有助于改进单个指令开销。

在这里插入图片描述

3.2.2“Recursion复杂度”和“Continuation复杂度” 性能分析

在这里插入图片描述
当将1个完整的execution trace切分为 t t t个segment时,总的复杂度为:

  • 证明所有 t t t个(具有 n n n-step)segments复杂度
  • 证明所有 t − 1 t-1 t1个 recursive proofs的复杂度

相应的关键路径为:

  • 1个segment proof
  • log ⁡ ( t ) \log(t) log(t)个recursive proofs

在这里插入图片描述
如Risc0中,有多达50%的开销用于对“continuation” state进行序列化。

对比SNARKs(Plonk)、Folding/Accumulation、STARKs等方案的recursion threshold开销为:
在这里插入图片描述
在这里插入图片描述

3.3 Proof system性能分析

Proof system性能分析,关注的是:

  • 单个约束证明用时。

对于多项式承诺方案(PCS,Polynomial Commitment Scheme),基于FRI的PCS性能要由于基于MSM的多项式承诺方案性能:【其中y轴表示的是每秒承诺的域元素数】
在这里插入图片描述
在这里插入图片描述

4. 结论及开放性问题

关于ISA的开放性问题有:

  • 如何将现有工具应用到zk-efficient ISA中?
  • 可进一步消除data movement么?如对memcpy进行direct argument?

关于Arithmetization的开放性问题有:

  • 降低单个指令的复杂度
  • 降低递归(recursion)复杂度
    • “doubly-fast”哈希函数(如Poseidon2、Tip5、XHash{8,12}、Monolith等)
  • 降低"continuation"复杂度

关于proof system/PCS的开放性问题有:

  • FFT、MLE、PCS应封装为库,项目方可受益于这些原语的更好实现。
  • 更好的bench工具,来对比各个方案的性能。

在这里插入图片描述

参考资料

[1] 2023年9月ZKSummit10 Wei Dai @1k(x) & Terry Chung @1k(x)分享视频ZK10: Analysis of zkVM Designs - Wei Dai & Terry Chung【1k(x)为早期密码学投资基金】

这篇关于zkVM设计性能分析的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/151871

相关文章

Vue3 的 shallowRef 和 shallowReactive:优化性能

大家对 Vue3 的 ref 和 reactive 都很熟悉,那么对 shallowRef 和 shallowReactive 是否了解呢? 在编程和数据结构中,“shallow”(浅层)通常指对数据结构的最外层进行操作,而不递归地处理其内部或嵌套的数据。这种处理方式关注的是数据结构的第一层属性或元素,而忽略更深层次的嵌套内容。 1. 浅层与深层的对比 1.1 浅层(Shallow) 定义

不懂推荐算法也能设计推荐系统

本文以商业化应用推荐为例,告诉我们不懂推荐算法的产品,也能从产品侧出发, 设计出一款不错的推荐系统。 相信很多新手产品,看到算法二字,多是懵圈的。 什么排序算法、最短路径等都是相对传统的算法(注:传统是指科班出身的产品都会接触过)。但对于推荐算法,多数产品对着网上搜到的资源,都会无从下手。特别当某些推荐算法 和 “AI”扯上关系后,更是加大了理解的难度。 但,不了解推荐算法,就无法做推荐系

性能测试介绍

性能测试是一种测试方法,旨在评估系统、应用程序或组件在现实场景中的性能表现和可靠性。它通常用于衡量系统在不同负载条件下的响应时间、吞吐量、资源利用率、稳定性和可扩展性等关键指标。 为什么要进行性能测试 通过性能测试,可以确定系统是否能够满足预期的性能要求,找出性能瓶颈和潜在的问题,并进行优化和调整。 发现性能瓶颈:性能测试可以帮助发现系统的性能瓶颈,即系统在高负载或高并发情况下可能出现的问题

性能分析之MySQL索引实战案例

文章目录 一、前言二、准备三、MySQL索引优化四、MySQL 索引知识回顾五、总结 一、前言 在上一讲性能工具之 JProfiler 简单登录案例分析实战中已经发现SQL没有建立索引问题,本文将一起从代码层去分析为什么没有建立索引? 开源ERP项目地址:https://gitee.com/jishenghua/JSH_ERP 二、准备 打开IDEA找到登录请求资源路径位置

黑神话,XSKY 星飞全闪单卷性能突破310万

当下,云计算仍然是企业主要的基础架构,随着关键业务的逐步虚拟化和云化,对于块存储的性能要求也日益提高。企业对于低延迟、高稳定性的存储解决方案的需求日益迫切。为了满足这些日益增长的 IO 密集型应用场景,众多云服务提供商正在不断推陈出新,推出具有更低时延和更高 IOPS 性能的云硬盘产品。 8 月 22 日 2024 DTCC 大会上(第十五届中国数据库技术大会),XSKY星辰天合正式公布了基于星

怎么让1台电脑共享给7人同时流畅设计

在当今的创意设计与数字内容生产领域,图形工作站以其强大的计算能力、专业的图形处理能力和稳定的系统性能,成为了众多设计师、动画师、视频编辑师等创意工作者的必备工具。 设计团队面临资源有限,比如只有一台高性能电脑时,如何高效地让七人同时流畅地进行设计工作,便成为了一个亟待解决的问题。 一、硬件升级与配置 1.高性能处理器(CPU):选择多核、高线程的处理器,例如Intel的至强系列或AMD的Ry

SWAP作物生长模型安装教程、数据制备、敏感性分析、气候变化影响、R模型敏感性分析与贝叶斯优化、Fortran源代码分析、气候数据降尺度与变化影响分析

查看原文>>>全流程SWAP农业模型数据制备、敏感性分析及气候变化影响实践技术应用 SWAP模型是由荷兰瓦赫宁根大学开发的先进农作物模型,它综合考虑了土壤-水分-大气以及植被间的相互作用;是一种描述作物生长过程的一种机理性作物生长模型。它不但运用Richard方程,使其能够精确的模拟土壤中水分的运动,而且耦合了WOFOST作物模型使作物的生长描述更为科学。 本文让更多的科研人员和农业工作者

MOLE 2.5 分析分子通道和孔隙

软件介绍 生物大分子通道和孔隙在生物学中发挥着重要作用,例如在分子识别和酶底物特异性方面。 我们介绍了一种名为 MOLE 2.5 的高级软件工具,该工具旨在分析分子通道和孔隙。 与其他可用软件工具的基准测试表明,MOLE 2.5 相比更快、更强大、功能更丰富。作为一项新功能,MOLE 2.5 可以估算已识别通道的物理化学性质。 软件下载 https://pan.quark.cn/s/57

基于51单片机的自动转向修复系统的设计与实现

文章目录 前言资料获取设计介绍功能介绍设计清单具体实现截图参考文献设计获取 前言 💗博主介绍:✌全网粉丝10W+,CSDN特邀作者、博客专家、CSDN新星计划导师,一名热衷于单片机技术探索与分享的博主、专注于 精通51/STM32/MSP430/AVR等单片机设计 主要对象是咱们电子相关专业的大学生,希望您们都共创辉煌!✌💗 👇🏻 精彩专栏 推荐订阅👇🏻 单片机

衡石分析平台使用手册-单机安装及启动

单机安装及启动​ 本文讲述如何在单机环境下进行 HENGSHI SENSE 安装的操作过程。 在安装前请确认网络环境,如果是隔离环境,无法连接互联网时,请先按照 离线环境安装依赖的指导进行依赖包的安装,然后按照本文的指导继续操作。如果网络环境可以连接互联网,请直接按照本文的指导进行安装。 准备工作​ 请参考安装环境文档准备安装环境。 配置用户与安装目录。 在操作前请检查您是否有 sud