用Go語(yǔ)言編寫(xiě)一個(gè)簡(jiǎn)單的分布式系統(tǒng)
分布式
- 注冊(cè)服務(wù):
RegistryService - 日志服務(wù):
LogService - 其他服務(wù):
GradingService、portal
RegistryService
RegistryService 提供的服務(wù):
- 提供
/services接口,用于其他服務(wù)在啟動(dòng)或者停止時(shí)告知POST:告訴RegistryService,我啟動(dòng)了一個(gè)服務(wù),調(diào)用add方法DELETE:告訴RegistryService,我停止了一個(gè)服務(wù),調(diào)用remove方法
- 通過(guò)
add函數(shù)將服務(wù)添加到registrations列表中r.registrations = append(r.registrations, reg)
- 通過(guò)
remove函數(shù)將服務(wù)從registrations列表中移除r.registrations = append(r.registrations[:i], r.registrations[i+1:]...)
- 這里需要注意的是:要保證線(xiàn)程安全,也就是在
append時(shí),需要使用到鎖
mutex.Lock() append(xxx, xxx) mutex.UnLock()
- 服務(wù)發(fā)現(xiàn):
比如說(shuō)
GradingService依賴(lài)LogService,那么GradingService就需要知道LogService的地址這個(gè)時(shí)候
RegistryService就可以通過(guò)registrations列表來(lái)通知GradingService,LogService的地址RegistryService是通過(guò)ServiceUpdateURL來(lái)通知的,GradingService,LogService的地址 - 服務(wù)發(fā)現(xiàn)需要分兩步進(jìn)行
如果
GradingService啟動(dòng)時(shí),如果LogService已經(jīng)啟動(dòng)了,那么RegistryService就可以直接通知GradingService,LogService的地址(r.sendRequiredServices(reg)方法)如果
GradingService啟動(dòng)時(shí),如果LogService還沒(méi)有啟動(dòng),那么RegistryService就不會(huì)通知GradingService,LogService的地址,等到LogService啟動(dòng)后,RegistryService才會(huì)通知GradingService,LogService的地址(notify方法)
RegistryService 對(duì)外只需要提供 RegisterService 方法,其他服務(wù)調(diào)用這個(gè)函數(shù),就能夠獲取 RegistryService 提供的服務(wù)
- 調(diào)用
RegisterService提供的接口/services,將服務(wù)注冊(cè)到RegistryService中 - 為注冊(cè)的服務(wù)添加路由:
ServiceUpdateURL - 為注冊(cè)的服務(wù)添加
ServeHTTP方法,用于處理ServiceUpdateURL的請(qǐng)求,這個(gè)請(qǐng)求在方法sendRequiredServices調(diào)用時(shí)相應(yīng),更新providers中的service - 為每個(gè)注冊(cè)的服務(wù)提供健康檢查
最后在提供一個(gè) ShutdownService 用于像 /services 接口發(fā)送 delete 請(qǐng)求,告知 RegistryService,我停止了一個(gè)服務(wù)
LogService
LogService 服務(wù)是對(duì)日志進(jìn)行管理,將其他服務(wù)的日志進(jìn)行收集、存儲(chǔ),提供 /log 接口,用于其他服務(wù)將日志發(fā)送給 LogService
GradingService 和 Portal
這兩個(gè)是業(yè)務(wù)服務(wù)
- 在啟動(dòng)服務(wù)時(shí)調(diào)用方法
RegistryService,將自己注冊(cè)到RegistryService中 - 在停止服務(wù)時(shí)調(diào)用方法
ShutdownService,將自己從RegistryService中移除
api
os.OpenFile
用于指定模式打開(kāi)文件,并返回文件的指針
func OpenFile(name string, flag int, perm FileMode) (*File, error)
flag 參數(shù):
os.O_RDONLY:只讀模式打開(kāi)文件os.O_WRONLY:只寫(xiě)模式打開(kāi)文件os.O_RDWR:讀寫(xiě)模式打開(kāi)文件os.O_APPEND:追加模式,寫(xiě)入內(nèi)容時(shí)將數(shù)據(jù)附加到文件尾部os.O_CREATE:如果文件不存在,則創(chuàng)建一個(gè)新文件
perm 參數(shù):
- 0:無(wú)權(quán)限
- 1:執(zhí)行權(quán)限
- 2:寫(xiě)權(quán)限
- 3:寫(xiě)和執(zhí)行權(quán)限
- 4:讀權(quán)限
- 5:讀和執(zhí)行權(quán)限
- 6:讀和寫(xiě)權(quán)限
- 7:讀、寫(xiě)和執(zhí)行權(quán)限
0644:表示文件的所有者可以讀取和寫(xiě)入文件,文件所屬組和其他用戶(hù)只能讀取文件。這是比較常見(jiàn)的設(shè)置0600:表示文件的所有者可以讀取和寫(xiě)入文件,但是文件所屬組和其他用戶(hù)不能訪(fǎng)問(wèn)該文件。這種權(quán)限安全性較高
ioutil.ReadAll
可以將整個(gè)文件內(nèi)容讀取到內(nèi)存中,可以將請(qǐng)求體的內(nèi)容讀取到內(nèi)存中
ps:將整個(gè)文件的內(nèi)容或者請(qǐng)求體一次性讀取到內(nèi)存中,對(duì)于非常大的文件或者請(qǐng)求體,內(nèi)存占用過(guò)高
fmt.Scanln
會(huì)阻塞程序的執(zhí)行,直到用戶(hù)在終端輸入一行內(nèi)容并按下回車(chē)鍵,然后它會(huì)將用戶(hù)輸入的值存儲(chǔ)到傳入的參數(shù)中
它主要用于讀取并解析簡(jiǎn)單的基本類(lèi)型數(shù)據(jù)
func main(){
var name string
var age int
fmt.Print("Enter your name: ")
fmt.Scanln(&name)
fmt.Print("Enter your age: ")
fmt.Scanln(&age)
fmt.Printf("Hello, %s! You are %d years old.\n", name, age)
}http
http.Server
ListenAndServe:?jiǎn)?dòng)服務(wù),并監(jiān)聽(tīng)指定的地址和端口,會(huì)阻塞Shutdown:優(yōu)雅地關(guān)閉服務(wù),可以保證正在處理的服務(wù)不會(huì)被中斷
var srv htto.Server
go func(){
srv.ListenAndServe()
}()
go func(){
srv.Shutdown()
}()ServeHTTP
當(dāng)一個(gè)結(jié)構(gòu)體實(shí)現(xiàn)了 ServeHTTP 方法后,那么這個(gè)結(jié)構(gòu)體就實(shí)現(xiàn)了 http.Handler 接口
實(shí)現(xiàn)了 http.Handler 接口的結(jié)構(gòu)體,就可以作為 http.Handle 方法的第二個(gè)參數(shù)
然后調(diào)用 http.ListenAndServe 方法就可以啟動(dòng)一個(gè)服務(wù),會(huì)自動(dòng)調(diào)用 ServeHTTP 方法來(lái)處理請(qǐng)求
func main() {
http.Handle("/ping", &MyHandler{})
http.ListenAndServe(":8080", nil)
}
type MyHandler struct{}
func (mh MyHandler) ServeHTTP(w http.ResponseWriter, r *http.Request) {
switch r.Method {
case http.MethodGet:
w.WriteHeader(http.StatusOK)
w.Write([]byte("pong"))
default:
w.WriteHeader(http.StatusMethodNotAllowed)
}
}將結(jié)構(gòu)體序列化
buf := new(bytes.Buffer)創(chuàng)建了一個(gè)新的bytes.Buffer對(duì)象,用于存儲(chǔ)編碼后的JSON數(shù)據(jù)enc := json.NewEncoder(buf)創(chuàng)建了一個(gè)新的JSON編碼器enc,并將其關(guān)聯(lián)到buf對(duì)象。這意味著編碼后的JSON數(shù)據(jù)將被寫(xiě)入到buf中err := enc.Encode(r)使用JSON編碼器enc將結(jié)構(gòu)體r編碼為JSON數(shù)據(jù),并將結(jié)果寫(xiě)入到buf中。Encode方法返回一個(gè)可能的錯(cuò)誤err
type Registration struct {
ServiceName string
ServiceURL string
}
r := Registration{
ServiceName: "LogService",
ServiceURL: "http://localhost:3000/services",
}
buf := new(bytes.Buffer)
enc := json.NewEncoder(buf)
err := enc.Encode(r)
res, err := http.Post(ServicesURL, "application/json", buf)使用 http 默認(rèn)請(qǐng)求
http.DefaultClient是標(biāo)準(zhǔn)庫(kù)中提供的默認(rèn)HTTP請(qǐng)求。它已經(jīng)預(yù)先配置好了一些默認(rèn)的設(shè)置,例如超時(shí)時(shí)間、重試機(jī)制等Do(req)是http.Client類(lèi)型的方法,用于執(zhí)行一個(gè)HTTP請(qǐng)求并返回響應(yīng)- 它接受一個(gè)
http.Request對(duì)象作為參數(shù),表示要發(fā)送的請(qǐng)求
- 它接受一個(gè)
req, _ := http.NewRequest(http.MethodDelete, "http://localhost:3000/services", bytes.NewBuffer([]byte("http://localhost:4000/log")))
req.Header.Add("Content-Type", "text/plain")
res, err := http.DefaultClient.Do(req)log
log.New
log.New 用于創(chuàng)建一個(gè)新的日志記錄器實(shí)例,用于將日志消息寫(xiě)入指定的輸出地,并可選擇性地添加前綴字符串
- 以文件的形式記錄日志,用
log.New創(chuàng)建一個(gè)新的log實(shí)例,然后調(diào)用log.Printf方法將日志寫(xiě)入文件
它接收 io.Writer 類(lèi)型的參數(shù),os.OpenFile 返回的文件指針類(lèi)型 *os.File 實(shí)現(xiàn)了 io.Writer 接口,所以可以將文件指針傳入 log.New 方法中
代碼參考如下:
import (
"fmt"
stlog "log"
"os"
)
func main() {
file, err := os.OpenFile("./logs", os.O_CREATE|os.O_WRONLY|os.O_APPEND, 0600)
if err != nil {
fmt.Println(err)
}
defer file.Close()
log := stlog.New(file, "[go] - ", stlog.LstdFlags)
log.Println("hello world")
}- 重寫(xiě)
log的Write方法,也能實(shí)現(xiàn)將日志寫(xiě)入文件
在重寫(xiě) Write 方法時(shí),需要定義一個(gè)類(lèi)型別名,然后在類(lèi)型別名上實(shí)現(xiàn) Write 方法,那么這個(gè)類(lèi)型別名就能夠傳入 log.New 方法中
代碼參考如下:
import (
stlog "log"
"os"
)
type filelog string
func (fl filelog) Write(data []byte) (int, error) {
file, err := os.OpenFile(string(fl), os.O_CREATE|os.O_WRONLY|os.O_APPEND, 0600)
if err != nil {
return 0, err
}
defer file.Close()
file.Write(data)
return len(data), nil
}
func main() {
log := stlog.New(filelog("./logs"), "[go] - ", stlog.LstdFlags)
log.Println("hello world")
}以上就是用Go語(yǔ)言編寫(xiě)一個(gè)簡(jiǎn)單的分布式系統(tǒng)的詳細(xì)內(nèi)容,更多關(guān)于Go語(yǔ)言分布式系統(tǒng)的資料請(qǐng)關(guān)注腳本之家其它相關(guān)文章!
- Go使用Redis實(shí)現(xiàn)分布式鎖的常見(jiàn)方法
- Golang使用Zookeeper實(shí)現(xiàn)分布式鎖
- Go分布式鏈路追蹤實(shí)戰(zhàn)探索
- 分布式架構(gòu)在Go語(yǔ)言網(wǎng)站的應(yīng)用
- Golang微服務(wù)框架Kratos實(shí)現(xiàn)分布式任務(wù)隊(duì)列Asynq的方法詳解
- 基于Golang實(shí)現(xiàn)Redis分布式鎖解決秒殺問(wèn)題
- Go語(yǔ)言使用Etcd實(shí)現(xiàn)分布式鎖
- SpringBoot分布式文件存儲(chǔ)數(shù)據(jù)庫(kù)mongod
- 在Go語(yǔ)言開(kāi)發(fā)中實(shí)現(xiàn)高性能的分布式日志收集的方法
相關(guān)文章
golang中實(shí)現(xiàn)graphql請(qǐng)求的方法
這篇文章主要介紹了如何在golang中實(shí)現(xiàn)graphql請(qǐng)求,在本文中,我們介紹了如何使用gqlgen來(lái)構(gòu)建GraphQL服務(wù),需要的朋友可以參考下2023-04-04
Golang中map數(shù)據(jù)類(lèi)型的使用方法
這篇文章主要介紹了Golang中map數(shù)據(jù)類(lèi)型的使用方法,文章圍繞主題展開(kāi)詳細(xì)的內(nèi)容戒殺,具有一定的參考價(jià)值,需要的朋友可以參考一下2022-09-09
Golang 字符串轉(zhuǎn)time類(lèi)型實(shí)現(xiàn)
本文主要介紹了Golang 字符串轉(zhuǎn)time類(lèi)型實(shí)現(xiàn),文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2023-03-03
詳解如何在Golang中實(shí)現(xiàn)CORS(跨域)
很多時(shí)候,需要允許Web應(yīng)用程序在不同域之間(跨域)實(shí)現(xiàn)共享資源,本文將簡(jiǎn)介跨域、CORS的概念,以及如何在Golang中如何實(shí)現(xiàn)CORS,文中有詳細(xì)的示例代碼,需要的朋友可以參考下2023-10-10
關(guān)于go-zero服務(wù)自動(dòng)收集問(wèn)題分析
這篇文章主要介紹了關(guān)于go-zero服務(wù)自動(dòng)收集問(wèn)題,本文給大家介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值,需要的朋友可以參考下2022-12-12
Golang 實(shí)現(xiàn)簡(jiǎn)單隨機(jī)負(fù)載均衡
均衡算法又分為 隨機(jī),輪詢(xún),加權(quán)輪詢(xún),哈希,而隨機(jī)負(fù)載均衡算法就是本文的重點(diǎn),需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2021-06-06

