如何配置代理

不配置代理，本地請求google等會超時

package main
import (
	"fmt"
	"net/http"
	"time"
)
func main() {
	// 創(chuàng)建一個自定義的 Transport 實例
	//transport := &http.Transport{
	//	Proxy: func(req *http.Request) (*url.URL, error) {
	//		//	return url.Parse("http://127.0.0.1:1081")
	//		return url.Parse("socks5://127.0.0.1:1080")
	//	},
	//}
	// 創(chuàng)建一個自定義的 Client 實例
	client := &http.Client{
		//Transport: transport, // 設置代理
		Timeout: time.Second * 3, // 設置超時
	}
	urlStr := "https://www.google.com/"
	// 發(fā)送 GET 請求
	resp, err := client.Get(urlStr)
	if err != nil {
		// 處理錯誤
		fmt.Println("發(fā)生了錯誤:err", err)
		return
	}
	defer resp.Body.Close()
	// 處理響應
	fmt.Println(resp.StatusCode)
}

輸出: 發(fā)生了錯誤:err Get "https://www.google.com/": context deadline exceeded (Client.Timeout exceeded while awaiting headers)

取消注釋，則會輸出 200

go http Client的Transport字段有什么作用

在 Go 的 http 包中，Client 類型代表了 HTTP 客戶端。在 Client 中有一個名為 Transport 的字段，它是一個 http.RoundTripper 接口類型的值，用于處理 HTTP 請求和響應的傳輸細節(jié)。

通過設置 Transport 字段，可以對 HTTP 請求進行一些自定義設置，比如設置代理、設置超時、設置 TLS 客戶端證書等。Transport 字段提供了一些默認實現(xiàn)，也可以通過實現(xiàn) http.RoundTripper 接口來自定義實現(xiàn)。

例如，可以通過自定義 Transport 來設置 HTTP 代理：

transport := &http.Transport{
    Proxy: func(req *http.Request) (*url.URL, error) {
        return url.Parse("http://127.0.0.1:8888")
    },
}
client := &http.Client{
    Transport: transport,
}

在上面的代碼中，通過自定義 Transport 并設置代理來實現(xiàn)將所有 HTTP 請求通過本地的代理服務器進行轉(zhuǎn)發(fā)。這樣就可以在代理服務器上進行一些中間人攻擊的操作，如抓包、篡改請求等。

設置超時不是這個字段吧

確實... 在 Go 的 http.Client 中，超時是通過 Timeout 字段來設置的，而 Transport 字段用于控制 HTTP 客戶端的網(wǎng)絡傳輸設置，例如代理、TLS 配置、連接池等。超時時間是通過 Timeout 字段指定的，而不是 Transport 字段。

我在用go寫一段請求很多個url然后返回響應內(nèi)容的程序，通過設置http Client的Transport設置了代理，但發(fā)現(xiàn)大量的EOF，這是什么原因？

在使用 HTTP 客戶端請求多個 URL 時，如果設置了代理，可能會導致連接出現(xiàn)大量的 EOF 錯誤。這通常是由于代理服務器在連接到遠程服務器時關閉了連接，而客戶端仍在嘗試使用已關閉的連接進行通信，從而導致錯誤。

一種可能的解決方案是，針對每個請求創(chuàng)建一個新的 HTTP 客戶端，并在使用完畢后立即關閉它。這樣可以確保每個請求都使用一個新的連接，避免出現(xiàn)連接復用的問題。示例代碼如下：

func fetchURL(url string) (string, error) {
    // 創(chuàng)建一個自定義的 Transport 實例
    transport := &http.Transport{
        Proxy: func(req *http.Request) (*url.URL, error) {
            return url.Parse("http://127.0.0.1:1080") // 設置代理
        },
    }
    // 創(chuàng)建一個自定義的 Client 實例
    client := &http.Client{
        Transport: transport, // 設置 Transport
        Timeout:   time.Second * 3, // 設置超時
    }
    // 發(fā)送 GET 請求
    resp, err := client.Get(url)
    if err != nil {
        // 處理錯誤
        return "", err
    }
    defer resp.Body.Close()
    // 讀取響應內(nèi)容
    body, err := ioutil.ReadAll(resp.Body)
    if err != nil {
        // 處理錯誤
        return "", err
    }
    // 返回響應內(nèi)容
    return string(body), nil
}
func main() {
    urls := []string{
        "http://example.com",
        "http://example.org",
        "http://example.net",
    }
    // 遍歷 URL 列表，并發(fā)送請求
    for _, url := range urls {
        resp, err := fetchURL(url)
        if err != nil {
            fmt.Printf("fetch %s error: %s\n", url, err)
        } else {
            fmt.Printf("fetch %s success: %s\n", url, resp)
        }
    }
}

此外，還可以嘗試對 Transport 的 MaxIdleConnsPerHost 和 MaxIdleConns 進行調(diào)整，以確保連接復用時不會出現(xiàn)連接超時或連接關閉的問題。

Transport 的 MaxIdleConnsPerHost 和 MaxIdleConns 是什么意思

Transport的MaxIdleConnsPerHost和MaxIdleConns字段都是用來控制http client連接池的大小和行為的。

• MaxIdleConnsPerHost：指定連接池中每個主機允許的最大空閑連接數(shù)。默認值是2。
• MaxIdleConns：指定整個連接池允許的最大空閑連接數(shù)。默認值是無限制。

當http client創(chuàng)建一個連接時，它將嘗試重用現(xiàn)有的空閑連接。如果連接池中沒有空閑連接，則http client將創(chuàng)建一個新的連接。如果連接池中的空閑連接已達到MaxIdleConns或MaxIdleConnsPerHost，則http client將關閉連接。

因此，如果將MaxIdleConns和MaxIdleConnsPerHost設置得太小，那么http client將會頻繁地關閉和創(chuàng)建連接，這會導致一些EOF錯誤?？梢赃m當?shù)卦黾舆@些字段的值，以減少這些錯誤的發(fā)生。

如何設置？

可以通過在創(chuàng)建 Transport 實例時進行設置，例如：

transport := &http.Transport{
    MaxIdleConnsPerHost: 10,  // 每個主機最大空閑連接數(shù)
    MaxIdleConns:        100, // 最大空閑連接數(shù)
}

其中，MaxIdleConnsPerHost 表示每個主機最大的空閑連接數(shù)，MaxIdleConns 表示所有主機的最大空閑連接數(shù)。您可以根據(jù)實際情況進行調(diào)整。需要注意的是，如果 MaxIdleConnsPerHost 設置的太小，可能會導致無法復用連接，從而增加了連接的建立和關閉成本；如果設置的太大，可能會占用過多的系統(tǒng)資源。

以上就是在Go網(wǎng)絡請求中配置代理的方法詳解的詳細內(nèi)容，更多關于Go網(wǎng)絡請求中配置代理的資料請關注腳本之家其它相關文章！

最新評論