GO——GPM

2024-01-26 08:28
文章标签 go gpm

本文主要是介绍GO——GPM,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

参考:https://juejin.cn/post/6844904130398404616

并发模型

参考:https://zhuanlan.zhihu.com/p/137339439

  • 多进程
    • 要点
      • 主进程监听
      • 每进来一个请求,fork子进程处理
    • 缺点
      • 进程占用高,服务器负载高
      • 进程间通信困难
        • 参考;https://www.jianshu.com/p/c1015f5ffa74
    • 示例
      • apache的web容器
  • 多线程与锁
    • 相关概念
      • 线程安全
        • 参考:https://www.huaweicloud.com/articles/6b47975275ab65b2c0a1c358d6369715.html
        • 代码多线程运行时,每次运行的变量预期、结果和单线程运行时是一样的,就是线程安全的
        • 线程安全问题由全局变量和静态变量引起
      • 模型
        • 互斥锁
        • 生产者-消费者
        • 同步
    • 优点
      • 易理解
      • 容易实现,基础语言库都支持
      • 其他并非模型的基础
    • 缺点
      • 难测试,容易隐藏某些问题
      • 线程创建、销毁的开销也不小
  • 单线程回调和事件轮询模型
    • 示例
      • nginx
        • 参考:https://www.modb.pro/db/47207
        • 多进程单线程
        • 每个worker进程采用异步非阻塞模式
        • 事件驱动模型: 异步非阻塞采用epoll:描述符列表管理交给内核,内核有事件发生,通知给进程
        • 多进程结构、异步非阻塞的处理机制和采用事件驱动模型(epoll)就是Nginx实现高并发的秘密所在。
  • 函数式编程
  • Clojure之道
  • actor
  • 通信顺序进程(CSP)
    • 一种描述并发性系统之间进行交互的模型
    • 参考:https://bbs.huaweicloud.com/blogs/292354
    • 核心观念:
      • 两个并发执行的实体通过通道channel连接起来,所有的消息都通过channel传输
      • 参考:https://juejin.cn/post/6844904130398404616
  • 数据级并行
  • Lambda架构
GPM调度模型

GPM

  • Goroutinue
    • go关键字创建的实体,是一个结构体,保存了堆栈信息
    • 语言层面实现
    • 组成
      • 执行栈
      • 状态
      • 当前占用线程
      • 调度相关数据
        • sched gobuf
        • 协程切换,恢复上下文的时候使用
  • Processor
    • 处理器,简历G、M的联系
    • 功能
      • machine和goroutine的连接
    • 数量
      • 默认与GOMAXPROCS一致
    • 组成
      • 性能追踪
      • 垃圾回收
      • 计时器
      • 处理器待运行队列
        • goroutine列表
  • Machine
    • 对应操作系统的线程
    • 最多线程数:GOMAXPROCS,通常设置成内核数
    • 结构体组成:
      • g0,重要,深度参与调度过程,goroutine的创建、内存分配
      • curg,重要,当前线程正在执行的goroutine
      • p,正在允许的处理器
      • nextp,暂存的处理器
      • old,系统调用之前的处理器

运行过程

  • 启动
    • 默认四个线程(M)、四个处理器(P)
  • goroutine创建
    • 函数体地址
    • 参数起始地址
    • 参数长度
  • goroutine进入队列
    • 调度相关信息更新
    • 这里进入的是P的私有队列
  • 又有其他goroutine进来
    • 如果还有空闲P
      • 依次放入空闲P
    • 如果P已满
      • 放入全局队列
  • M处理完了之后
    • 1、先取对应的P的队列
    • 2、再取全局队列
    • 3、最后取其他P的队列(偷)
    • 如果还是取不到,断开与P的连接,进入idle

特点

  • 抢占式调度
    • 在runtime.main中会创建一个额外m运行sysmon函数,抢占就是在sysmon中实现的。
  • G长久阻塞在M,runtime会新建M,P会把其他G挂载到新M。
    • 旧G阻塞完成或被认为死掉,回收M

这篇关于GO——GPM的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/646192

相关文章

go 指针接收者和值接收者的区别小结

《go指针接收者和值接收者的区别小结》在Go语言中,值接收者和指针接收者是方法定义中的两种接收者类型,本文主要介绍了go指针接收者和值接收者的区别小结,文中通过示例代码介绍的非常详细,需要的朋友们下... 目录go 指针接收者和值接收者的区别易错点辨析go 指针接收者和值接收者的区别指针接收者和值接收者的

Go 语言中的select语句详解及工作原理

《Go语言中的select语句详解及工作原理》在Go语言中,select语句是用于处理多个通道(channel)操作的一种控制结构,它类似于switch语句,本文给大家介绍Go语言中的select语... 目录Go 语言中的 select 是做什么的基本功能语法工作原理示例示例 1:监听多个通道示例 2:带

Go标准库常见错误分析和解决办法

《Go标准库常见错误分析和解决办法》Go语言的标准库为开发者提供了丰富且高效的工具,涵盖了从网络编程到文件操作等各个方面,然而,标准库虽好,使用不当却可能适得其反,正所谓工欲善其事,必先利其器,本文将... 目录1. 使用了错误的time.Duration2. time.After导致的内存泄漏3. jsO

go中空接口的具体使用

《go中空接口的具体使用》空接口是一种特殊的接口类型,它不包含任何方法,本文主要介绍了go中空接口的具体使用,具有一定的参考价值,感兴趣的可以了解一下... 目录接口-空接口1. 什么是空接口?2. 如何使用空接口?第一,第二,第三,3. 空接口几个要注意的坑坑1:坑2:坑3:接口-空接口1. 什么是空接

利用Go语言开发文件操作工具轻松处理所有文件

《利用Go语言开发文件操作工具轻松处理所有文件》在后端开发中,文件操作是一个非常常见但又容易出错的场景,本文小编要向大家介绍一个强大的Go语言文件操作工具库,它能帮你轻松处理各种文件操作场景... 目录为什么需要这个工具?核心功能详解1. 文件/目录存javascript在性检查2. 批量创建目录3. 文件

Go语言中最便捷的http请求包resty的使用详解

《Go语言中最便捷的http请求包resty的使用详解》go语言虽然自身就有net/http包,但是说实话用起来没那么好用,resty包是go语言中一个非常受欢迎的http请求处理包,下面我们一起来学... 目录安装一、一个简单的get二、带查询参数三、设置请求头、body四、设置表单数据五、处理响应六、超

Golang基于内存的键值存储缓存库go-cache

《Golang基于内存的键值存储缓存库go-cache》go-cache是一个内存中的key:valuestore/cache库,适用于单机应用程序,本文主要介绍了Golang基于内存的键值存储缓存库... 目录文档安装方法示例1示例2使用注意点优点缺点go-cache 和 Redis 缓存对比1)功能特性

Go 1.23中Timer无buffer的实现方式详解

《Go1.23中Timer无buffer的实现方式详解》在Go1.23中,Timer的实现通常是通过time包提供的time.Timer类型来实现的,本文主要介绍了Go1.23中Timer无buff... 目录Timer 的基本实现无缓冲区的实现自定义无缓冲 Timer 实现更复杂的 Timer 实现总结在

Go使用pprof进行CPU,内存和阻塞情况分析

《Go使用pprof进行CPU,内存和阻塞情况分析》Go语言提供了强大的pprof工具,用于分析CPU、内存、Goroutine阻塞等性能问题,帮助开发者优化程序,提高运行效率,下面我们就来深入了解下... 目录1. pprof 介绍2. 快速上手:启用 pprof3. CPU Profiling:分析 C

使用Go语言开发一个命令行文件管理工具

《使用Go语言开发一个命令行文件管理工具》这篇文章主要为大家详细介绍了如何使用Go语言开发一款命令行文件管理工具,支持批量重命名,删除,创建,移动文件,需要的小伙伴可以了解下... 目录一、工具功能一览二、核心代码解析1. 主程序结构2. 批量重命名3. 批量删除4. 创建文件/目录5. 批量移动三、如何安