golang資料聚合的優雅操作

2021-10-01 14:41:44 字數 777 閱讀 1533

需要將上傳的資料進行特性分組之後再進行資料庫批量插入或流向下乙個處理方法。

由於資料不確定性做聚合操作之後會有多組資料需要快取,如果多協程進行操作需要將快取資料進行加鎖,容易造成資料死鎖。

通過管道和select進行資料傳遞,同時在select中做快取的所有操作,在給定條件流向下乙個處理方法時通過channel傳遞過去同時清空對應快取,

這樣操作都在select中不會有競爭發生。

1.建立快取

2.建立select處理快取資料流過來的通道

3.在select中快取資料同時聚合資料,之後判斷是否流向下一通道

4.建立worker處理聚合後資料

package main

import

("fmt"

"math/rand"

"time"

)type data struct

}func

main()

forelse

} cache[data.id]

= cachedata

iflen(cachedata)

>= execcachecount }}

}}()

for i :=

0; i < workercount; i++}}

}()}

for c <- data

time.

sleep(20

* time.millisecond)

}}

Golang的優雅重啟

更新 2015年4月 florian von bock 已將本文中描述的內容轉換為乙個名為 endless 的優秀go包 如果您有golang http服務,可能需要重新啟動它以公升級二進位制檔案或更改某些配置。如果你 像我一樣 因為網路伺服器處理它而優雅地重新啟動是理所當然的,你可能會發現這個配方...

如何優雅的入門golang

golang標準庫文件 高效能分布式系統開發 海量並行處理 遊戲服務端開發再好不過了 package main import fmt func main 複製 go run main.go hello world 複製 識別符號用來命名變數 型別等程式體。乙個或者多個字母 a za z 數字 0 9...

golang中的優雅中止

不過,業務中 總會存在對中止比較敏感的介面 比如支付相關 並且 總會存在一些帶狀態的服務,此時優雅中止就顯得比較重要了。本文通過乙個go 定時任務示例來簡單介紹 go 技術棧中優雅中止的處理思路。作為高可靠的服務平台,k8s 定義了終止 pod 業務程序在 pod 中執行 的基本步驟 當主動刪除 p...