精品国产人成在线_亚洲高清无码在线观看_国产在线视频国产永久2021_国产AV综合第一页一个的一区免费影院黑人_最近中文字幕MV高清在线视频

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

Go并發模型的實現原理

馬哥Linux運維 ? 來源:CSDN技術社區 ? 作者:CSDN技術社區 ? 2022-04-15 08:49 ? 次閱讀

Go語言是為并發而生的語言,Go語言是為數不多的在語言層面實現并發的語言;也正是Go語言的并發特性,吸引了全球無數的開發者

并發(concurrency)和并行(parallellism)

  • 并發(concurrency):兩個或兩個以上的任務在一段時間內被執行。我們不必care這些任務在某一個時間點是否是同時執行,可能同時執行,也可能不是,我們只關心在一段時間內,哪怕是很短的時間(一秒或者兩秒)是否執行解決了兩個或兩個以上任務。

  • 并行(parallellism):兩個或兩個以上的任務在同一時刻被同時執行。

并發說的是邏輯上的概念,而并行,強調的是物理運行狀態。并發“包含”并行。

(詳情請見:Rob Pike 的PPT

Go的CSP并發模型

Go實現了兩種并發形式。第一種是大家普遍認知的:多線程共享內存。其實就是Java或者C++等語言中的多線程開發。另外一種是Go語言特有的,也是Go語言推薦的:CSP(communicating sequential processes)并發模型。

CSP并發模型是在1970年左右提出的概念,屬于比較新的概念,不同于傳統的多線程通過共享內存來通信,CSP講究的是“以通信的方式來共享內存”。

請記住下面這句話:"Do not communicate by sharing memory; instead, share memory by communicating."“不要以共享內存的方式來通信,相反,要通過通信來共享內存?!?/span>

普通的線程并發模型,就是像Java、C++、或者Python,他們線程間通信都是通過共享內存的方式來進行的。非常典型的方式就是,在訪問共享數據(例如數組、Map、或者某個結構體或對象)的時候,通過鎖來訪問,因此,在很多時候,衍生出一種方便操作的數據結構,叫做“線程安全的數據結構”。例如Java提供的包”java.util.concurrent”中的數據結構。Go中也實現了傳統的線程并發模型。

Go的CSP并發模型,是通過goroutinechannel來實現的。

  • goroutine 是Go語言中并發的執行單位。有點抽象,其實就是和傳統概念上的”線程“類似,可以理解為”線程“。

  • channel 是Go語言中各個并發結構體(goroutine)之前的通信機制。通俗的講,就是各個goroutine之間通信的”管道“,有點類似于Linux中的管道。

生成一個goroutine的方式非常的簡單:Go一下,就生成了:


	

gof();

通信機制channel也很方便,傳數據用channel <- data,取數據用<-channel。

在通信過程中,傳數據channel <- data和取數據<-channel必然會成對出現,因為這邊傳,那邊取,兩個goroutine之間才會實現通信。

而且不管傳還是取,必阻塞,直到另外的goroutine傳或者取為止。

有兩個goroutine,其中一個發起了向channel中發起了傳值操作。(goroutine為矩形,channel為箭頭)

8287b7c8-bc16-11ec-aa7f-dac502259ad0.png

左邊的goroutine開始阻塞,等待有人接收。

這時候,右邊的goroutine發起了接收操作

82943c14-bc16-11ec-aa7f-dac502259ad0.png

右邊的goroutine也開始阻塞,等待別人傳送。

這時候,兩邊goroutine都發現了對方,于是兩個goroutine開始一傳,一收。

82a08a0a-bc16-11ec-aa7f-dac502259ad0.png

這便是Golang CSP并發模型最基本的形式。

Go并發模型的實現原理

我們先從線程講起,無論語言層面何種并發模型,到了操作系統層面,一定是以線程的形態存在的。而操作系統根據資源訪問權限的不同,體系架構可分為用戶空間和內核空間;內核空間主要操作訪問CPU資源、I/O資源、內存資源等硬件資源,為上層應用程序提供最基本的基礎資源,用戶空間呢就是上層應用程序的固定活動空間,用戶空間不可以直接訪問資源,必須通過“系統調用”、“庫函數”或“Shell腳本”來調用內核空間提供的資源。

我們現在的計算機語言,可以狹義的認為是一種“軟件”,它們中所謂的“線程”,往往是用戶態的線程,和操作系統本身內核態的線程(簡稱KSE),還是有區別的。

線程模型的實現,可以分為以下幾種方式:

用戶級線程模型

如圖所示,多個用戶態的線程對應著一個內核線程,程序線程的創建、終止、切換或者同步等線程工作必須自身來完成。

82ac575e-bc16-11ec-aa7f-dac502259ad0.png

內核級線程模型

這種模型直接調用操作系統的內核線程,所有線程的創建、終止、切換、同步等操作,都由內核來完成。C++就是這種。

82b7d8a4-bc16-11ec-aa7f-dac502259ad0.png

兩級線程模型

這種模型是介于用戶級線程模型和內核級線程模型之間的一種線程模型。這種模型的實現非常復雜,和內核級線程模型類似,一個進程中可以對應多個內核級線程,但是進程中的線程不和內核線程一一對應;這種線程模型會先創建多個內核級線程,然后用自身的用戶級線程去對應創建的多個內核級線程,自身的用戶級線程需要本身程序去調度,內核級的線程交給操作系統內核去調度。

Go語言的線程模型就是一種特殊的兩級線程模型。暫且叫它“MPG”模型吧。

82b7d8a4-bc16-11ec-aa7f-dac502259ad0.png

Go線程實現模型MPG

M指的是Machine,一個M直接關聯了一個內核線程。P指的是”processor”,代表了M所需的上下文環境,也是處理用戶級代碼邏輯的處理器。G指的是Goroutine,其實本質上也是一種輕量級的線程。

三者關系如下圖所示:

82d3ec24-bc16-11ec-aa7f-dac502259ad0.png

以上這個圖講的是兩個線程(內核線程)的情況。一個M會對應一個內核線程,一個M也會連接一個上下文P,一個上下文P相當于一個“處理器”,一個上下文連接一個或者多個Goroutine。P(Processor)的數量是在啟動時被設置為環境變量GOMAXPROCS的值,或者通過運行時調用函數runtime.GOMAXPROCS()進行設置。Processor數量固定意味著任意時刻只有固定數量的線程在運行go代碼。Goroutine中就是我們要執行并發的代碼。圖中P正在執行的Goroutine為藍色的;處于待執行狀態的Goroutine為灰色的,灰色的Goroutine形成了一個隊列runqueues

三者關系的宏觀的圖為:

82e01170-bc16-11ec-aa7f-dac502259ad0.png

拋棄 P(Processor)

你可能會想,為什么一定需要一個上下文,我們能不能直接除去上下文,讓Goroutinerunqueues掛到M上呢?答案是不行,需要上下文的目的,是讓我們可以直接放開其他線程,當遇到內核線程阻塞的時候。

一個很簡單的例子就是系統調用sysall,一個線程肯定不能同時執行代碼和系統調用被阻塞,這個時候,此線程M需要放棄當前的上下文環境P,以便可以讓其他的Goroutine被調度執行。

82eba81e-bc16-11ec-aa7f-dac502259ad0.png

如上圖左圖所示,M0中的G0執行了syscall,然后就創建了一個M1(也有可能本身就存在,沒創建),(轉向右圖)然后M0丟棄了P,等待syscall的返回值,M1接受了P,將·繼續執行Goroutine隊列中的其他Goroutine。

當系統調用syscall結束后,M0會“偷”一個上下文,如果不成功,M0就把它的Gouroutine G0放到一個全局的runqueue中,然后自己放到線程池或者轉入休眠狀態。全局runqueue是各個P在運行完自己的本地的Goroutine runqueue后用來拉取新goroutine的地方。P也會周期性的檢查這個全局runqueue上的goroutine,否則,全局runqueue上的goroutines可能得不到執行而餓死。

均衡的分配工作

按照以上的說法,上下文P會定期的檢查全局的goroutine 隊列中的goroutine,以便自己在消費掉自身Goroutine隊列的時候有事可做。假如全局goroutine隊列中的goroutine也沒了呢?就從其他運行的中的Prunqueue里偷。

每個P中的Goroutine不同導致他們運行的效率和時間也不同,在一個有很多P和M的環境中,不能讓一個P跑完自身的Goroutine就沒事可做了,因為或許其他的P有很長的goroutine隊列要跑,得需要均衡。該如何解決呢?

Go的做法倒也直接,從其他P中偷一半!

82f7fd94-bc16-11ec-aa7f-dac502259ad0.png

原文標題:Golang 并發原理分析

文章出處:【微信公眾號:馬哥Linux運維】歡迎添加關注!文章轉載請注明出處。

審核編輯:湯梓紅
聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 原理
    +關注

    關注

    4

    文章

    550

    瀏覽量

    44873
  • 模型
    +關注

    關注

    1

    文章

    3178

    瀏覽量

    48729
  • go語言
    +關注

    關注

    1

    文章

    158

    瀏覽量

    9032

原文標題:Golang 并發原理分析

文章出處:【微信號:magedu-Linux,微信公眾號:馬哥Linux運維】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    三十分鐘入門基礎Go Java小子版

    語法與 C 相近,但功能上有:內存安全,GC,結構形態及 CSP-style 并發計算。 適用范圍 本篇文章適用于學習過其他面向對象語言(Java、Php),但沒有學過Go語言的初學者。文章 主要從Go
    的頭像 發表于 08-12 14:32 ?682次閱讀
    三十分鐘入門基礎<b class='flag-5'>Go</b> Java小子版

    【GoRK3288】1.Rockchip RK3288, GO!GO!!GO!!!

    技術的興起,使用Go的高并發特性來實現控制服務器將會大大提高運行的性能簡化開發的難度,而且可以作為一個節點控制著各種外設。這個節點設備甚至可以是ARM系統,并且核心越多性能越高,所以本次開發采用了高性能
    發表于 08-14 21:07

    Go語言開發有什么優勢?怎么學?

    、庫的依賴關系,大大減輕了維護的負擔?! ?. 并發行好。Go天生為高并發而生,Goroutine 和 channel 使得編寫高并發的服務端軟件變得相當容易,很多情況下完全不需要考慮
    發表于 12-19 16:08

    Go開發語言的優勢在哪里?

    Goroutine和 channel 使得編寫高并發的服務端軟件變得相當容易,很多情況下完全不需要考慮鎖機制以及由此帶來的各種問題。單個 Go 應用也能有效的利用多個 CPU 核,并行執行的性能好。3.
    發表于 03-22 15:04

    Lite Actor:方舟Actor并發模型的輕量級優化

    并發模型是用來實現不同應用場景中并發任務的編程模型,通過合理地使用多線程,可以縮減應用程序的開發和維護成本,同時還能更好地提升應用程序在多核
    發表于 07-18 12:00

    Go語言及Beego框架環境搭建相關資料推薦

    就完成了?! √焐С?b class='flag-5'>并發,可以充分的利用多核,很容易實現并發。  25個關鍵字,但是表達能力很強大,幾乎支持大多數你在其他語言見過的特性:繼承、重載、對象等。  內置強大的工具,Go
    發表于 10-17 16:57

    移動應用高級語言開發——并發探索

    、簡單、高效的并發模型考慮,業界目前給應用開發者提供的多線程模型,有避免數據競爭、實現無鎖化的趨勢。例如,在Web上,JS在多線程使用的是消息通信機制(內存隔離,增加可轉移Builti
    發表于 08-28 17:08

    負荷管理系統中的并發通信設計與實現

    負荷管理系統中的并發通信設計與實現摘 要 大規模并發通信的管理與控制是計算機監控領域研究的熱點與難點之一。本文以廈門電業局負荷管理系統為例,對大規模并發通信
    發表于 11-01 09:50 ?13次下載

    dubbo-go 中的 TPS Limit 設計與實現

    則是 Dubbo 的 Go 語言實現。 最近在 dubbo-go 的 todo list 上發現,它還沒有實現 TPS Limit 的模塊,于是就抽空
    發表于 03-17 15:27 ?633次閱讀

    詳解剖析Go語言調度模型的設計

    golang的MPG調度模型是保障Go語言效率高的一個重要特性,本文詳細介紹了Go語言調度模型的設計。 前言 Please remember that at the end of th
    的頭像 發表于 07-26 10:12 ?2057次閱讀
    詳解剖析<b class='flag-5'>Go</b>語言調度<b class='flag-5'>模型</b>的設計

    golang并發機制和其他語言在實現上有什么不同

    golang 并發機制和其他語言在實現上有什么不同?為什么能做到高效快速?本文做了詳細介紹。 由于對普通語法的介紹網上資源極多,Go 官方的上手指南 A Tour of Go: htt
    的頭像 發表于 07-29 16:35 ?1435次閱讀
    golang<b class='flag-5'>并發</b>機制和其他語言在<b class='flag-5'>實現</b>上有什么不同

    關于Actor并發模型的解析

    并發模型是用來實現不同應用場景中并發任務的編程模型,通過合理地使用多線程,可以縮減應用程序的開發和維護成本,同時還能更好地提升應用程序在多核
    的頭像 發表于 07-18 09:23 ?1987次閱讀

    NVIDIA Triton 系列文章(10):模型并發執行

    前面已經做好了每個推理模型的基礎配置,基本上就能正常讓 Triton 服務器使用這些獨立模型進行推理。接下來的重點,就是要讓設備的計算資源盡可能地充分使用,首先第一件事情就是模型并發
    的頭像 發表于 01-05 11:55 ?1086次閱讀

    shell腳本實現并發多進程

    在Shell腳本中實現并發多進程可以使用以下方法: 使用符號來將其放入后臺執行,從而實現并發多進程。例如: #!/bin/bash command1 command3 符號,它們將在后
    的頭像 發表于 11-08 10:20 ?1268次閱讀

    go語言如何解決并發問題

    作為一個后端開發,日常工作中接觸最多的兩門語言就是PHP和GO了。無可否認,PHP確實是最好的語言(手動狗頭哈哈),寫起來真的很舒爽,沒有任何心智負擔,字符串和整型壓根就不用區分,開發速度真的是比
    的頭像 發表于 10-23 13:38 ?113次閱讀
    <b class='flag-5'>go</b>語言如何解決<b class='flag-5'>并發</b>問題