GO——GPM

2024-01-26 08:28
文章标签 go gpm

本文主要是介绍GO——GPM,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

参考:https://juejin.cn/post/6844904130398404616

并发模型

参考:https://zhuanlan.zhihu.com/p/137339439

  • 多进程
    • 要点
      • 主进程监听
      • 每进来一个请求,fork子进程处理
    • 缺点
      • 进程占用高,服务器负载高
      • 进程间通信困难
        • 参考;https://www.jianshu.com/p/c1015f5ffa74
    • 示例
      • apache的web容器
  • 多线程与锁
    • 相关概念
      • 线程安全
        • 参考:https://www.huaweicloud.com/articles/6b47975275ab65b2c0a1c358d6369715.html
        • 代码多线程运行时,每次运行的变量预期、结果和单线程运行时是一样的,就是线程安全的
        • 线程安全问题由全局变量和静态变量引起
      • 模型
        • 互斥锁
        • 生产者-消费者
        • 同步
    • 优点
      • 易理解
      • 容易实现,基础语言库都支持
      • 其他并非模型的基础
    • 缺点
      • 难测试,容易隐藏某些问题
      • 线程创建、销毁的开销也不小
  • 单线程回调和事件轮询模型
    • 示例
      • nginx
        • 参考:https://www.modb.pro/db/47207
        • 多进程单线程
        • 每个worker进程采用异步非阻塞模式
        • 事件驱动模型: 异步非阻塞采用epoll:描述符列表管理交给内核,内核有事件发生,通知给进程
        • 多进程结构、异步非阻塞的处理机制和采用事件驱动模型(epoll)就是Nginx实现高并发的秘密所在。
  • 函数式编程
  • Clojure之道
  • actor
  • 通信顺序进程(CSP)
    • 一种描述并发性系统之间进行交互的模型
    • 参考:https://bbs.huaweicloud.com/blogs/292354
    • 核心观念:
      • 两个并发执行的实体通过通道channel连接起来,所有的消息都通过channel传输
      • 参考:https://juejin.cn/post/6844904130398404616
  • 数据级并行
  • Lambda架构
GPM调度模型

GPM

  • Goroutinue
    • go关键字创建的实体,是一个结构体,保存了堆栈信息
    • 语言层面实现
    • 组成
      • 执行栈
      • 状态
      • 当前占用线程
      • 调度相关数据
        • sched gobuf
        • 协程切换,恢复上下文的时候使用
  • Processor
    • 处理器,简历G、M的联系
    • 功能
      • machine和goroutine的连接
    • 数量
      • 默认与GOMAXPROCS一致
    • 组成
      • 性能追踪
      • 垃圾回收
      • 计时器
      • 处理器待运行队列
        • goroutine列表
  • Machine
    • 对应操作系统的线程
    • 最多线程数:GOMAXPROCS,通常设置成内核数
    • 结构体组成:
      • g0,重要,深度参与调度过程,goroutine的创建、内存分配
      • curg,重要,当前线程正在执行的goroutine
      • p,正在允许的处理器
      • nextp,暂存的处理器
      • old,系统调用之前的处理器

运行过程

  • 启动
    • 默认四个线程(M)、四个处理器(P)
  • goroutine创建
    • 函数体地址
    • 参数起始地址
    • 参数长度
  • goroutine进入队列
    • 调度相关信息更新
    • 这里进入的是P的私有队列
  • 又有其他goroutine进来
    • 如果还有空闲P
      • 依次放入空闲P
    • 如果P已满
      • 放入全局队列
  • M处理完了之后
    • 1、先取对应的P的队列
    • 2、再取全局队列
    • 3、最后取其他P的队列(偷)
    • 如果还是取不到,断开与P的连接,进入idle

特点

  • 抢占式调度
    • 在runtime.main中会创建一个额外m运行sysmon函数,抢占就是在sysmon中实现的。
  • G长久阻塞在M,runtime会新建M,P会把其他G挂载到新M。
    • 旧G阻塞完成或被认为死掉,回收M

这篇关于GO——GPM的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/646192

相关文章

Go语言中nil判断的注意事项(最新推荐)

《Go语言中nil判断的注意事项(最新推荐)》本文给大家介绍Go语言中nil判断的注意事项,本文给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友参考下吧... 目录1.接口变量的特殊行为2.nil的合法类型3.nil值的实用行为4.自定义类型与nil5.反射判断nil6.函数返回的

Go语言数据库编程GORM 的基本使用详解

《Go语言数据库编程GORM的基本使用详解》GORM是Go语言流行的ORM框架,封装database/sql,支持自动迁移、关联、事务等,提供CRUD、条件查询、钩子函数、日志等功能,简化数据库操作... 目录一、安装与初始化1. 安装 GORM 及数据库驱动2. 建立数据库连接二、定义模型结构体三、自动迁

Go语言代码格式化的技巧分享

《Go语言代码格式化的技巧分享》在Go语言的开发过程中,代码格式化是一个看似细微却至关重要的环节,良好的代码格式化不仅能提升代码的可读性,还能促进团队协作,减少因代码风格差异引发的问题,Go在代码格式... 目录一、Go 语言代码格式化的重要性二、Go 语言代码格式化工具:gofmt 与 go fmt(一)

Go学习记录之runtime包深入解析

《Go学习记录之runtime包深入解析》Go语言runtime包管理运行时环境,涵盖goroutine调度、内存分配、垃圾回收、类型信息等核心功能,:本文主要介绍Go学习记录之runtime包的... 目录前言:一、runtime包内容学习1、作用:① Goroutine和并发控制:② 垃圾回收:③ 栈和

Go语言中泄漏缓冲区的问题解决

《Go语言中泄漏缓冲区的问题解决》缓冲区是一种常见的数据结构,常被用于在不同的并发单元之间传递数据,然而,若缓冲区使用不当,就可能引发泄漏缓冲区问题,本文就来介绍一下问题的解决,感兴趣的可以了解一下... 目录引言泄漏缓冲区的基本概念代码示例:泄漏缓冲区的产生项目场景:Web 服务器中的请求缓冲场景描述代码

Go语言如何判断两张图片的相似度

《Go语言如何判断两张图片的相似度》这篇文章主要为大家详细介绍了Go语言如何中实现判断两张图片的相似度的两种方法,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 在介绍技术细节前,我们先来看看图片对比在哪些场景下可以用得到:图片去重:自动删除重复图片,为存储空间"瘦身"。想象你是一个

Go语言中Recover机制的使用

《Go语言中Recover机制的使用》Go语言的recover机制通过defer函数捕获panic,实现异常恢复与程序稳定性,具有一定的参考价值,感兴趣的可以了解一下... 目录引言Recover 的基本概念基本代码示例简单的 Recover 示例嵌套函数中的 Recover项目场景中的应用Web 服务器中

Go语言中使用JWT进行身份验证的几种方式

《Go语言中使用JWT进行身份验证的几种方式》本文主要介绍了Go语言中使用JWT进行身份验证的几种方式,包括dgrijalva/jwt-go、golang-jwt/jwt、lestrrat-go/jw... 目录简介1. github.com/dgrijalva/jwt-go安装:使用示例:解释:2. gi

go rate 原生标准限速库的使用

《gorate原生标准限速库的使用》本文主要介绍了Go标准库golang.org/x/time/rate实现限流,采用令牌桶算法控制请求速率,提供Allow/Reserve/Wait方法,具有一定... 目录介绍安装API介绍rate.NewLimiter:创建限流器limiter.Allow():请求是否

Go 语言中的 Struct Tag 的用法详解

《Go语言中的StructTag的用法详解》在Go语言中,结构体字段标签(StructTag)是一种用于给字段添加元信息(metadata)的机制,常用于序列化(如JSON、XML)、ORM映... 目录一、结构体标签的基本语法二、json:"token"的具体含义三、常见的标签格式变体四、使用示例五、使用