Go語言標準庫之context-有解無憂

在 Go http包的Server中，每一個請求在都有一個對應的 goroutine 去處理，請求處理函式通常會啟動額外的 goroutine 用來訪問后端服務，比如資料庫和RPC服務，用來處理一個請求的 goroutine 通常需要訪問一些與請求特定的資料，比如終端用戶的身份認證資訊、驗證相關的token、請求的截止時間，當一個請求被取消或超時時，所有用來處理該請求的 goroutine 都應該迅速退出，然后系統才能釋放這些 goroutine 占用的資源，

為什么需要Context

基本示例

package main

import (
	"fmt"
	"sync"

	"time"
)

var wg sync.WaitGroup

// 初始的例子

func worker() {
	for {
		fmt.Println("worker")
		time.Sleep(time.Second)
	}
	// 如何接收外部命令實作退出
	wg.Done()
}

func main() {
	wg.Add(1)
	go worker()
	// 如何優雅的實作結束子goroutine
	wg.Wait()
	fmt.Println("over")
}

全域變數方式

package main

import (
	"fmt"
	"sync"

	"time"
)

var wg sync.WaitGroup
var exit bool

// 全域變數方式存在的問題：
// 1. 使用全域變數在跨包呼叫時不容易統一
// 2. 如果worker中再啟動goroutine，就不太好控制了，

func worker() {
	for {
		fmt.Println("worker")
		time.Sleep(time.Second)
		if exit {
			break
		}
	}
	wg.Done()
}

func main() {
	wg.Add(1)
	go worker()
	time.Sleep(time.Second * 3) // sleep3秒以免程式過快退出
	exit = true                 // 修改全域變數實作子goroutine的退出
	wg.Wait()
	fmt.Println("over")
}

通道方式

package main

import (
	"fmt"
	"sync"

	"time"
)

var wg sync.WaitGroup

// 管道方式存在的問題：
// 1. 使用全域變數在跨包呼叫時不容易實作規范和統一，需要維護一個共用的channel

func worker(exitChan chan struct{}) {
LOOP:
	for {
		fmt.Println("worker")
		time.Sleep(time.Second)
		select {
		case <-exitChan: // 等待接收上級通知
			break LOOP
		default:
		}
	}
	wg.Done()
}

func main() {
	var exitChan = make(chan struct{})
	wg.Add(1)
	go worker(exitChan)
	time.Sleep(time.Second * 3) // sleep3秒以免程式過快退出
	exitChan <- struct{}{}      // 給子goroutine發送退出信號
	close(exitChan)
	wg.Wait()
	fmt.Println("over")
}

官方版的方案

package main

import (
	"context"
	"fmt"
	"sync"

	"time"
)

var wg sync.WaitGroup

func worker(ctx context.Context) {
LOOP:
	for {
		fmt.Println("worker")
		time.Sleep(time.Second)
		select {
		case <-ctx.Done(): // 等待上級通知
			break LOOP
		default:
		}
	}
	wg.Done()
}

func main() {
	ctx, cancel := context.WithCancel(context.Background())
	wg.Add(1)
	go worker(ctx)
	time.Sleep(time.Second * 3)
	cancel() // 通知子goroutine結束
	wg.Wait()
	fmt.Println("over")
}

當子goroutine又開啟另外一個goroutine時，只需要將ctx傳入即可：

package main

import (
	"context"
	"fmt"
	"sync"

	"time"
)

var wg sync.WaitGroup

func worker(ctx context.Context) {
	go worker2(ctx)
LOOP:
	for {
		fmt.Println("worker")
		time.Sleep(time.Second)
		select {
		case <-ctx.Done(): // 等待上級通知
			break LOOP
		default:
		}
	}
	wg.Done()
}

func worker2(ctx context.Context) {
LOOP:
	for {
		fmt.Println("worker2")
		time.Sleep(time.Second)
		select {
		case <-ctx.Done(): // 等待上級通知
			break LOOP
		default:
		}
	}
}
func main() {
	ctx, cancel := context.WithCancel(context.Background())
	wg.Add(1)
	go worker(ctx)
	time.Sleep(time.Second * 3)
	cancel() // 通知子goroutine結束
	wg.Wait()
	fmt.Println("over")
}

Context初識

Go1.7加入了一個新的標準庫context，它定義了Context型別，專門用來簡化對于處理單個請求的多個 goroutine 之間與請求域的資料、取消信號、截止時間等相關操作，這些操作可能涉及多個 API 呼叫，

對服務器傳入的請求應該創建背景關系，而對服務器的傳出呼叫應該接受背景關系，它們之間的函式呼叫鏈必須傳遞背景關系，或者可以使用WithCancel、WithDeadline、WithTimeout或WithValue創建的派生背景關系，當一個背景關系被取消時，它派生的所有背景關系也被取消，

Context介面

context.Context是一個介面，該介面定義了四個需要實作的方法，具體簽名如下：

type Context interface {
    Deadline() (deadline time.Time, ok bool)
    Done() <-chan struct{}
    Err() error
    Value(key interface{}) interface{}
}

其中：

Deadline方法需要回傳當前Context被取消的時間，也就是完成作業的截止時間（deadline）；
Done方法需要回傳一個Channel，這個Channel會在當前作業完成或者背景關系被取消之后關閉，多次呼叫Done方法會回傳同一個Channel；
Err方法會回傳當前Context結束的原因，它只會在Done回傳的Channel被關閉時才會回傳非空的值；
- 如果當前Context被取消就會回傳Canceled錯誤；
- 如果當前Context超時就會回傳DeadlineExceeded錯誤；
Value方法會從Context中回傳鍵對應的值，對于同一個背景關系來說，多次呼叫Value 并傳入相同的Key會回傳相同的結果，該方法僅用于傳遞跨API和行程間跟請求域的資料；

Background()和TODO()

Go內置兩個函式：Background()和TODO()，這兩個函式分別回傳一個實作了Context介面的background和todo，我們代碼中最開始都是以這兩個內置的背景關系物件作為最頂層的partent context，衍生出更多的子背景關系物件，

Background()主要用于main函式、初始化以及測驗代碼中，作為Context這個樹結構的最頂層的Context，也就是根Context，

TODO()，它目前還不知道具體的使用場景，如果我們不知道該使用什么Context的時候，可以使用這個，

background和todo本質上都是emptyCtx結構體型別，是一個不可取消，沒有設定截止時間，沒有攜帶任何值的Context，

With系列函式

此外，context包中還定義了四個With系列函式，

WithCancel

WithCancel的函式簽名如下：

func WithCancel(parent Context) (ctx Context, cancel CancelFunc)

WithCancel回傳帶有新Done通道的父節點的副本，當呼叫回傳的cancel函式或當關閉父背景關系的Done通道時，將關倍訓傳背景關系的Done通道，無論先發生什么情況，

取消此背景關系將釋放與其關聯的資源，因此代碼應該在此背景關系中運行的操作完成后立即呼叫cancel，

func gen(ctx context.Context) <-chan int {
		dst := make(chan int)
		n := 1
		go func() {
			for {
				select {
				case <-ctx.Done():
					return // return結束該goroutine，防止泄露
				case dst <- n:
					n++
				}
			}
		}()
		return dst
	}
func main() {
	ctx, cancel := context.WithCancel(context.Background())
	defer cancel() // 當我們取完需要的整數后呼叫cancel

	for n := range gen(ctx) {
		fmt.Println(n)
		if n == 5 {
			break
		}
	}
}

上面的示例代碼中，gen函式在單獨的goroutine中生成整數并將它們發送到回傳的通道， gen的呼叫者在使用生成的整數之后需要取消背景關系，以免gen啟動的內部goroutine發生泄漏，

WithDeadline

WithDeadline的函式簽名如下：

func WithDeadline(parent Context, deadline time.Time) (Context, CancelFunc)

回傳父背景關系的副本，并將deadline調整為不遲于d，如果父背景關系的deadline已經早于d，則WithDeadline(parent, d)在語意上等同于父背景關系，當截止日過期時，當呼叫回傳的cancel函式時，或者當父背景關系的Done通道關閉時，回傳背景關系的Done通道將被關閉，以最先發生的情況為準，

取消此背景關系將釋放與其關聯的資源，因此代碼應該在此背景關系中運行的操作完成后立即呼叫cancel，

func main() {
	d := time.Now().Add(50 * time.Millisecond)
	ctx, cancel := context.WithDeadline(context.Background(), d)

	// 盡管ctx會過期，但在任何情況下呼叫它的cancel函式都是很好的實踐，
	// 如果不這樣做，可能會使背景關系及其父類存活的時間超過必要的時間，
	defer cancel()

	select {
	case <-time.After(1 * time.Second):
		fmt.Println("overslept")
	case <-ctx.Done():
		fmt.Println(ctx.Err())
	}
}

上面的代碼中，定義了一個50毫秒之后過期的deadline，然后我們呼叫context.WithDeadline(context.Background(), d)得到一個背景關系（ctx）和一個取消函式（cancel），然后使用一個select讓主程式陷入等待：等待1秒后列印overslept退出或者等待ctx過期后退出，因為ctx50秒后就過期，所以ctx.Done()會先接收到值，上面的代碼會列印ctx.Err()取消原因，

WithTimeout

WithTimeout的函式簽名如下：

func WithTimeout(parent Context, timeout time.Duration) (Context, CancelFunc)

WithTimeout回傳WithDeadline(parent, time.Now().Add(timeout))，

取消此背景關系將釋放與其相關的資源，因此代碼應該在此背景關系中運行的操作完成后立即呼叫cancel，通常用于資料庫或者網路連接的超時控制，具體示例如下：

package main

import (
	"context"
	"fmt"
	"sync"

	"time"
)

// context.WithTimeout

var wg sync.WaitGroup

func worker(ctx context.Context) {
LOOP:
	for {
		fmt.Println("db connecting ...")
		time.Sleep(time.Millisecond * 10) // 假設正常連接資料庫耗時10毫秒
		select {
		case <-ctx.Done(): // 50毫秒后自動呼叫
			break LOOP
		default:
		}
	}
	fmt.Println("worker done!")
	wg.Done()
}

func main() {
	// 設定一個50毫秒的超時
	ctx, cancel := context.WithTimeout(context.Background(), time.Millisecond*50)
	wg.Add(1)
	go worker(ctx)
	time.Sleep(time.Second * 5)
	cancel() // 通知子goroutine結束
	wg.Wait()
	fmt.Println("over")
}

WithValue

WithValue函式能夠將請求作用域的資料與 Context 物件建立關系，宣告如下：

func WithValue(parent Context, key, val interface{}) Context

WithValue回傳父節點的副本，其中與key關聯的值為val，

僅對API和行程間傳遞請求域的資料使用背景關系值，而不是使用它來傳遞可選引數給函式，

所提供的鍵必須是可比較的，并且不應該是string型別或任何其他內置型別，以避免使用背景關系在包之間發生沖突，WithValue的用戶應該為鍵定義自己的型別，為了避免在分配給interface{}時進行分配，背景關系鍵通常具有具體型別struct{}，或者，匯出的背景關系關鍵變數的靜態型別應該是指標或介面，

package main

import (
	"context"
	"fmt"
	"sync"

	"time"
)

// context.WithValue

type TraceCode string

var wg sync.WaitGroup

func worker(ctx context.Context) {
	key := TraceCode("TRACE_CODE")
	traceCode, ok := ctx.Value(key).(string) // 在子goroutine中獲取trace code
	if !ok {
		fmt.Println("invalid trace code")
	}
LOOP:
	for {
		fmt.Printf("worker, trace code:%s\n", traceCode)
		time.Sleep(time.Millisecond * 10) // 假設正常連接資料庫耗時10毫秒
		select {
		case <-ctx.Done(): // 50毫秒后自動呼叫
			break LOOP
		default:
		}
	}
	fmt.Println("worker done!")
	wg.Done()
}

func main() {
	// 設定一個50毫秒的超時
	ctx, cancel := context.WithTimeout(context.Background(), time.Millisecond*50)
	// 在系統的入口中設定trace code傳遞給后續啟動的goroutine實作日志資料聚合
	ctx = context.WithValue(ctx, TraceCode("TRACE_CODE"), "12512312234")
	wg.Add(1)
	go worker(ctx)
	time.Sleep(time.Second * 5)
	cancel() // 通知子goroutine結束
	wg.Wait()
	fmt.Println("over")
}

使用Context的注意事項

推薦以引數的方式顯示傳遞Context
以Context作為引數的函式方法，應該把Context作為第一個引數，
給一個函式方法傳遞Context的時候，不要傳遞nil，如果不知道傳遞什么，就使用context.TODO()
Context的Value相關方法應該傳遞請求域的必要資料，不應該用于傳遞可選引數
Context是執行緒安全的，可以放心的在多個goroutine中傳遞

客戶端超時取消示例

呼叫服務端API時如何在客戶端實作超時控制？

server端

// context_timeout/server/main.go
package main

import (
	"fmt"
	"math/rand"
	"net/http"

	"time"
)

// server端，隨機出現慢回應

func indexHandler(w http.ResponseWriter, r *http.Request) {
	number := rand.Intn(2)
	if number == 0 {
		time.Sleep(time.Second * 10) // 耗時10秒的慢回應
		fmt.Fprintf(w, "slow response")
		return
	}
	fmt.Fprint(w, "quick response")
}

func main() {
	http.HandleFunc("/", indexHandler)
	err := http.ListenAndServe(":8000", nil)
	if err != nil {
		panic(err)
	}
}

client端

// context_timeout/client/main.go
package main

import (
	"context"
	"fmt"
	"io/ioutil"
	"net/http"
	"sync"
	"time"
)

// 客戶端

type respData struct {
	resp *http.Response
	err  error
}

func doCall(ctx context.Context) {
	transport := http.Transport{
	   // 請求頻繁可定義全域的client物件并啟用長鏈接
	   // 請求不頻繁使用短鏈接
	   DisableKeepAlives: true, 	}
	client := http.Client{
		Transport: &transport,
	}

	respChan := make(chan *respData, 1)
	req, err := http.NewRequest("GET", "http://127.0.0.1:8000/", nil)
	if err != nil {
		fmt.Printf("new requestg failed, err:%v\n", err)
		return
	}
	req = req.WithContext(ctx) // 使用帶超時的ctx創建一個新的client request
	var wg sync.WaitGroup
	wg.Add(1)
	defer wg.Wait()
	go func() {
		resp, err := client.Do(req)
		fmt.Printf("client.do resp:%v, err:%v\n", resp, err)
		rd := &respData{
			resp: resp,
			err:  err,
		}
		respChan <- rd
		wg.Done()
	}()

	select {
	case <-ctx.Done():
		//transport.CancelRequest(req)
		fmt.Println("call api timeout")
	case result := <-respChan:
		fmt.Println("call server api success")
		if result.err != nil {
			fmt.Printf("call server api failed, err:%v\n", result.err)
			return
		}
		defer result.resp.Body.Close()
		data, _ := ioutil.ReadAll(result.resp.Body)
		fmt.Printf("resp:%v\n", string(data))
	}
}

func main() {
	// 定義一個100毫秒的超時
	ctx, cancel := context.WithTimeout(context.Background(), time.Millisecond*100)
	defer cancel() // 呼叫cancel釋放子goroutine資源
	doCall(ctx)
}

轉載請註明出處，本文鏈接：https://www.uj5u.com/houduan/43051.html

標籤：Go

上一篇：[題記]鏈表的中間節點-leetcode

下一篇：Go語言標準庫之net/http