广告
返回顶部
首页 > 资讯 > 后端开发 > GO >Go语言中并发的工作原理
  • 544
分享到

Go语言中并发的工作原理

2024-04-02 19:04:59 544人浏览 泡泡鱼
摘要

一、Go语言中Goroutine的基本原理 Go语言里的并发指的是能让某个函数独立于其他函数运行的能力。 Go语言的goroutine是一个独立的工作单元, Go 语言的并发同步模型

一、Go语言中Goroutine的基本原理

Go语言里的并发指的是能让某个函数独立于其他函数运行的能力。

Go语言的goroutine是一个独立的工作单元,

Go 语言的并发同步模型来自一个叫作通信顺序进程(Communicating Sequential Processes,CSP)的范型(paradigm)。

CSP 是一种消息传递模型,通过在goroutine 之间传递数据来传递消息,而不是对数据进行加来实现同步访问。消息的传递通过Go语言中的Channel(通道)来实现。

进程(process) 看作一个包含了应用程序在运行中需要用到和维护的各种资源的容器

线程(Thread)是一个执行空间,这个空间会被操作系统调度来运行函数中所写的代码。

每个进程至少包含一个线程,每个进程的初始线程被称作主线程。因为执行这个线程的空间是应用程序的本身的空间,所以当主线程终止时,应用程序也会终止。

下图就是进程和线程的简要关系。

补充:句柄是什么?

我的理解句柄就是给用户操作内核资源的指针,指向指针的指针。【把手】和【门】的关系,使用们把手能转动整个门(系统资源)

操作系统会在物理处理器上调度线程来运行,而Go 语言的运行时会在逻辑处理器上调度goroutine来运行。每个逻辑处理器都分别绑定到单个操作系统线程。下面我们就来简单描述一下goroutine执行的流程。

首先来了解一下操作系统线程、逻辑处理器和本地运行队列

全局运行队列:刚创建的goruntine会被安排到这里面,通过一些调度算法,分配给逻辑处理器

操作系统线程:这个就是传统意义上的线程,用于具体goroutine的执行,他会和一个逻辑器进行绑定

逻辑处理器:里面维护着一个本地的队列,用于本地队列里面goroutine的调度

本地运行队列:装载着待执行的goruntine

支撑整个调度器的主要有4个重要结构,分别是M、G、P、Sched,前三个定义在runtime.h中,Sched定义在proc.c中。

  • Sched结构就是调度器,它维护有存储M和G的队列以及调度器的一些状态信息等。
  • M代表内核级线程,一个M就是一个线程,goroutine就是跑在M之上的;M是一个很大的结构,里面维护小对象内存cache(mcache)、当前执行的goroutine、随机数发生器等等非常多的信息。
  • P全称是Processor,处理器,它的主要用途就是用来执行goroutine的,所以它也维护了一个goroutine队列,里面存储了所有需要它来执行的goroutine,这个P的角色可能有一点让人迷惑,一开始容易和M冲突,后面重点聊一下它们的关系。
  • G就是goroutine实现的核心结构了,G维护了goroutine需要的栈、程序计数器以及它所在的M等信息。

整个过程描述:

当创建一个Goroutine的时候,先放到全局队列当中,然后会把这个Goroutine分配到一个逻辑处理器的本地队列中,这个逻辑处理器会绑定一个操作系统线程,由这个线程去执行Goroutine的代码。

生动描述:

地鼠(gopher)用小车运着一堆待加工的砖。M就可以看作图中的地鼠,P就是小车,G就是小车里装的砖。一图胜千言啊,弄清楚了它们三者的关系,下面我们就开始重点聊地鼠是如何在搬运砖块的。

1.runqget, 地鼠(M)试图从自己的小车(P)取出一块砖(G),当然结果可能失败,也就是这个地鼠的小车已经空了,没有砖了。

2.findrunnable, 如果地鼠自己的小车中没有砖,那也不能闲着不干活是吧,所以地鼠就会试图跑去工场仓库取一块砖来处理;工场仓库也可能没砖啊,出现这种情况的时候,这个地鼠也没有偷懒停下干活,而是悄悄跑出去,随机盯上一个小伙伴(地鼠),然后从它的车里试图偷一半砖到自己车里。如果多次尝试偷砖都失败了,那说明实在没有砖可搬了,这个时候地鼠就会把小车还回停车场,然后睡觉休息了。如果地鼠睡觉了,下面的过程当然都停止了,地鼠睡觉也就是线程sleep了。

3.wakep, 到这个过程的时候,可怜的地鼠发现自己小车里有好多砖啊,自己根本处理不过来;再回头一看停车场居然有闲置的小车,立马跑到宿舍一看,你妹,居然还有小伙伴在睡觉,直接给屁股一脚,“你妹,居然还在睡觉,老子都快累死了,赶紧起来干活,分担点工作。”,小伙伴醒了,拿上自己的小车,乖乖干活去了。有时候,可怜的地鼠跑到宿舍却发现没有在睡觉的小伙伴,于是会很失望,最后只好向工场老板说——”停车场还有闲置的车啊,我快干不动了,赶紧从别的工场借个地鼠来帮忙吧。”,最后工场老板就搞来一个新的地鼠干活了。

4.execute,地鼠拿着砖放入火种欢快的烧练起来。

注: “地鼠偷砖”叫work stealing,一种调度算法。

到这里,貌似整个工场都正常的运转起来了,无懈可击的样子。不对,还有一个疑点没解决啊,假设地鼠的车里有很多砖,它把一块砖放入火炉中后,何时把它取出来,放入第二块砖呢?难道要一直把第一块砖烧练好,才取出来吗?那估计后面的砖真的是等得花儿都要谢了。这里就是要真正解决goroutine的调度,上下文切换问题。

goroutine的阻塞

当一个OS线程M0陷入阻塞时(如下图),P转而在运行M1,图中的M1可能是正被创建,或者从线程缓存中取出。

简单解释就是,当当前的Goroutine在阻塞,就把他和当前线程绑定,让当前的线程继续执行这个Goroutine(就是等待),其他的goroutine随着逻辑处理器被绑定到另一个线程上,继续执行。

当阻塞的线程返回时,它必须尝试取得一个逻辑处理器来运行goroutine,一般情况下,它会从其他的OS线程那里拿一个P过来,如果没有拿到的话,它就把goroutine放在一个全局运行队列里,然后自己睡眠(放入线程缓存里)。所有的P也会周期性的检查global runqueue并运行其中的goroutine,否则global runqueue上的goroutine永远无法执行。

还有就像下面的图片,左边的线程一个满载状态,一个没有goroutine,此时的做法就是会进行重新分配,就想右侧图展示

参考 :https://morsMachine.dk/go-scheduler

二、Go语言中的并发和并行

并发是两个任务可以在重叠的时间段内启动,运行和完成。并行是任务在同一时间运行,例如,在多核处理器上。

并发是独立执行过程的组合,而并行是同时执行(可能相关的)计算。

并发是一次处理很多事情,并行是同时做很多事情。

  • 应用程序可以是并发的,但不是并行的,这意味着它可以同时处理多个任务,但是没有两个任务在同一时刻执行。
  • 应用程序可以是并行的,但不是并发的,这意味着它同时处理多核CPU中的任务的多个子任务。
  • 应用程序可以即不是并行的,也不是并发的,这意味着它一次一个地处理所有任务。
  • 应用程序可以即是并行的也是并发的,这意味着它同时在多核CPU中同时处理多个任务。

简单讲:并行就是同时做很多事 并发就是一堆事情一个时间点来了,然后通过分片等方式感觉像都在执行

以上就是这篇文章的全部内容了,希望本文的内容对大家的学习或者工作具有一定的参考学习价值,谢谢大家对编程网的支持。如果你想了解更多相关内容请查看下面相关链接

您可能感兴趣的文档:

--结束END--

本文标题: Go语言中并发的工作原理

本文链接: https://www.lsjlt.com/news/164373.html(转载时请注明来源链接)

有问题或投稿请发送至: 邮箱/279061341@qq.com    QQ/279061341

本篇文章演示代码以及资料文档资料下载

下载Word文档到电脑,方便收藏和打印~

下载Word文档
猜你喜欢
  • Go语言中并发的工作原理
    一、Go语言中Goroutine的基本原理 Go语言里的并发指的是能让某个函数独立于其他函数运行的能力。 Go语言的goroutine是一个独立的工作单元, Go 语言的并发同步模型...
    99+
    2022-11-13
  • Go语言中的并发goroutine底层原理
    目录一、基本概念①并发、并行区分②从用户态线程,内核态线程阐述go与java并发的优劣②高并发为什么是Go语言强项?③Go语言实现高并发底层GMP模型原理解析二、上代码学会Go语言并...
    99+
    2022-11-13
  • Go语言并发之原子操作详解
    目录修改赋值与读取比较并交换小结代码中的加锁操作因为涉及内核态的上下文切换会比较耗时、代价比较高。针对基本数据类型我们还可以使用原子操作来保证并发安全,因为原子操作是Go语言提供的方...
    99+
    2022-12-29
    Go语言 并发 原子操作 Go语言 原子操作 Go语言 并发
  • Go语言的并发模型是如何工作的?
    Go语言是一门开源的编程语言,由Google公司开发。它因其高效的并发模型而广受欢迎。本文将深入探讨Go语言的并发模型是如何工作的,并且给出一些演示代码,帮助读者更好地理解。 一、Go语言中的并发模型 Go语言的并发模型基于Goroutin...
    99+
    2023-07-27
    同步 并发 日志
  • Go语言中并发goroutine底层原理的示例分析
    小编给大家分享一下Go语言中并发goroutine底层原理的示例分析,希望大家阅读完这篇文章之后都有所收获,下面让我们一起去探讨吧!一、基本概念①并发、并行区分1.概念并发:同一时间段内一个对象执行多个任务,充分利用时间并行:同一时刻,多个...
    99+
    2023-06-29
  • 详解go语言的并发
    目录1、启动go语言的协程2、runtime.Goexit()方法。立即终止当前的协程3、runtime.GOMAXPROCS()表示go使用几个cpu执行代码4、管道定义和创...
    99+
    2022-06-07
    详解go语言 GO 并发 go语言
  • Go语言中的并发是什么
    这篇文章主要介绍“Go语言中的并发是什么”,在日常操作中,相信很多人在Go语言中的并发是什么问题上存在疑惑,小编查阅了各式资料,整理出简单好用的操作方法,希望对大家解答”Go语言中的并发是什么”的疑惑有所帮...
    99+
    2022-10-18
  • 自然语言处理和并发操作:如何在Linux中使用Go语言?
    自然语言处理(NLP)是一种利用计算机技术来识别、理解、操纵和生成人类语言的方法。与此同时,Go语言是一种高效、可靠、并发的编程语言,它在处理大量数据和并发操作方面表现出色。在本文中,我们将探讨如何在Linux中使用Go语言进行自然语言处...
    99+
    2023-09-16
    自然语言处理 并发 linux
  • 如何处理Go语言中的并发数据库操作问题?
    如何处理 Go 语言中的并发数据库操作问题?在 Go 语言中,处理并发数据库操作是一个常见的挑战。由于数据库访问通常是一个相对较慢的操作,所以在多个 Goroutine 中同时执行数据库操作可能会导致一些问题,如数据竞争和性能下降。在本文中...
    99+
    2023-10-22
    数据竞争问题
  • 大数据处理中,GO 语言的并发特性如何发挥作用?
    随着互联网和物联网的飞速发展,数据量越来越大,如何高效地处理这些数据成为了一项重要的技术挑战。而在这个领域,GO 语言的并发特性成为了一个备受关注的话题。本文将探讨在大数据处理中,GO 语言的并发特性如何发挥作用。 一、GO 语言的并发特性...
    99+
    2023-09-17
    大数据 接口 关键字
  • 如何在Go语言中处理并发存储?
    Go语言是一门支持并发编程的语言,它提供了一些方便的工具来处理并发存储。在本文中,我们将讨论如何在Go语言中处理并发存储。 了解Go语言的并发模型 在Go语言中,每个程序都有一个主线程,称为主goroutine。当我们需要执行并发操作...
    99+
    2023-10-17
    并发 教程 存储
  • C语言scanf的工作原理详解
    目录原理解释解决办法总结原理解释 先来观察一段代码和运行结果: #include <iostream> using namespace std; int main()...
    99+
    2022-11-12
  • Go语言CSP并发模型goroutine及channel底层实现原理
    目录Go的CSP并发模型(goroutine + channel)1、goroutinegoroutine的优点:2、channel无缓存channel有缓存channel3、Go并...
    99+
    2022-11-13
  • 深入探索Go语言垃圾回收机制的工作原理
    Go语言的垃圾回收机制采用了并发标记清除(concurrent mark and sweep)的算法,主要分为三个阶段:标记阶段、清...
    99+
    2023-10-08
    Golang
  • Go语言中如何实现并发?
    Go语言作为一门新兴的编程语言,其最大的特点之一就是并发编程,它可以轻松地实现高并发的任务。那么,Go语言中如何实现并发呢?本文将为您详细解答。 goroutine goroutine是Go语言中的轻量级线程,它可以在一个单独的线程中...
    99+
    2023-09-30
    并发 shell bash
  • Go语言中如何处理并发数据结构操作的问题?
    Go语言中如何处理并发数据结构操作的问题?在并发编程中,经常会遇到需要对共享数据结构进行操作的情况,如何安全高效地管理这些并发操作是一个重要的问题。Go语言提供了一些机制来处理并发数据结构操作,包括锁、通道和原子操作等。本文将通过具体的代码...
    99+
    2023-10-22
    数据结构 操作 并发
  • Go语言中如何处理并发请求合并问题?
    Go语言中如何处理并发请求合并问题?随着互联网的快速发展,处理大量并发请求成为了在开发中常常需要面对的问题。而当我们面对大量的并发请求时,为了提高系统的性能和资源利用率,我们往往需要将多个相似的请求合并处理。在Go语言中,有几种方法可以处理...
    99+
    2023-10-22
    处理 合并 并发请求
  • Go语言中如何处理并发编程的问题
    在Go语言中,可以使用goroutine和channel来处理并发编程的问题。1. Goroutine:Goroutine是Go语言...
    99+
    2023-10-09
    Go语言
  • 如何处理Go语言中的并发测试问题
    在Go语言中处理并发测试问题时,可以采取以下几个步骤:1. 使用goroutine和channel:Go语言中可以使用gorouti...
    99+
    2023-10-09
    Go语言
  • 如何处理Go语言中的并发测试问题?
    如何处理Go语言中的并发测试问题?Go语言作为一种高效且适合并发编程的语言,有许多内置的工具和特性用于处理并发。然而,在进行并发测试时,我们需要更加谨慎地编写代码来避免潜在的问题,以确保测试结果的准确性和可靠性。下面将介绍一些可以帮助我们处...
    99+
    2023-10-22
    Go语言 (Go language) 并发测试 (Concurrency Testing) 处理问题 (Problem
软考高级职称资格查询
编程网,编程工程师的家园,是目前国内优秀的开源技术社区之一,形成了由开源软件库、代码分享、资讯、协作翻译、讨论区和博客等几大频道内容,为IT开发者提供了一个发现、使用、并交流开源技术的平台。
  • 官方手机版

  • 微信公众号

  • 商务合作