Nginx反向代理至go-fastdfs案例講解
背景
go-fastdfs是支持http協(xié)議的一款分布式文件系統(tǒng),在一般的項目中,很少是直接將文件系統(tǒng)的地址暴露出來的,大多數(shù)都會通過nginx等軟件進(jìn)行反代過去,由于我司的業(yè)務(wù)和網(wǎng)絡(luò)環(huán)境場景相對特殊,由公網(wǎng)部分(公有云)和內(nèi)網(wǎng)部分(私有云)組成的混合云網(wǎng)絡(luò)體系,公有云主要就是作為一個出口和入口以及運行一些審計認(rèn)證等應(yīng)用,對上游請求進(jìn)行處理,從而減少私有云的處理次數(shù),提升性能。那么也正是因為這樣,在公網(wǎng)的環(huán)境下,要訪問到私有云提供的服務(wù)則必須使用反向代理。同樣道理,對于文件系統(tǒng)的訪問也如此,如何在nginx中進(jìn)行配置才能使得外部的網(wǎng)絡(luò)請求可以反向代理到go-fastdfs呢?本文將逐步闡述。
一般配置
在一般的情況下,熟悉nginx的朋友都知道,如果需要配置反向代理,直接寫一個location上下文和proxy模塊即可,如果需要自定義前綴,使用一個rewrite模塊即可。簡單例子如下:
location ~ /dfs/group([0-9]) { proxy_pass http://localhost:8080; rewrite ^/dfs/(.*)$ /$1 break; proxy_set_header Host $host:$server_port; proxy_set_header X-Real-IP $remote_addr; proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for; }
到這里,一般的反代配置就算是可以了,那么對于go-fastdfs而言是否可以了呢?對于go-fastdfs一般上傳是可以了,但是呢,對于使用了tus做斷點續(xù)傳還是不夠,為什么呢?因為tus服務(wù)端會返回301重定向,并且需要攜帶一定的請求頭過去,所以還需要特別的設(shè)置一下。
支持Tus的反代配置
如果需要做tus的反代,要支持301重定向Location的重寫還要支持一定的請求頭轉(zhuǎn)發(fā),那該如何配置呢?請參考下面的配置
l
ocation ~ /dfs1/group([0-9]) { access_log logs/dfs/access.log main; error_log logs/dfs/error.log error; rewrite ^/dfs1/(.*)$ /$1 break; proxy_pass http://localhost:8051; # Disable request and response buffering proxy_request_buffering off; proxy_buffering off; proxy_http_version 1.1; proxy_set_header Host $host:$server_port; proxy_set_header X-Real-IP $remote_addr; proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for; # 如果server_name不是公網(wǎng)域名,這個地方可以設(shè)置成ip proxy_set_header X-Forwarded-Host $hostname; proxy_set_header X-Forwarded-Proto $scheme; proxy_set_header Upgrade $http_upgrade; proxy_set_header Connection "upgrade"; # 因為使用了前綴加rewrite,所以要修改返回的Location加上反向代理的前綴 proxy_redirect ~^(.*)/group([0-9])/big/upload/(.*) /dfs/group$2/big/upload/$3; client_max_body_size 0; }
上面要注意一下就是proxy_redirect和client_max_body_size這兩個配置,第一個配置是因為tus服務(wù)端返回的重定向Location是不會攜帶自定義前綴的,因此需要自己加入自定義的前綴,我這里是/dfs,如果是別的,更換下就好。第二個就是client_max_body_size了,這個是設(shè)置為0表示不管上傳多大的文件都不會報request too large的問題,直接轉(zhuǎn)發(fā)過去,如果需要設(shè)置,那么請設(shè)置大于等于chunkSize的數(shù)字。什么是chunkSize?就是tus客戶端分塊上傳的時候,每一塊的大小,具體請參考官方文檔。
負(fù)載均衡配置
在配置了集群服務(wù)器的情況下,上傳或者下載如何進(jìn)行負(fù)載均衡呢?使用nginx做了反代,配合upstream模塊就可以實現(xiàn)了,具體參考如下配置
upstream dfs_stream { server host1:port; server host2:port; ip_hash; }
上面的配置和一般的負(fù)載均衡沒有什么不一樣,唯一要注意的是要配置ip_hash,為什么呢?因為使用斷點續(xù)傳的時候,文件是分塊上傳的,如果不是ip_hash的話,有可能會前面幾片被上傳到A服務(wù)器,后面幾片被上傳到B服務(wù)器,那么這樣子文件就不是完整的了,因此需要注意這個問題。
到此這篇關(guān)于Nginx反向代理至go-fastdfs案例講解的文章就介紹到這了,更多相關(guān)Nginx反向代理至go-fastdfs內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
相關(guān)文章
nginx代理多次302的解決方法(nginx Follow 302)
這篇文章主要介紹了nginx代理多次302的解決方法(nginx Follow 302),詳細(xì)的介紹了解決方法,小編覺得挺不錯的,現(xiàn)在分享給大家,也給大家做個參考。一起跟隨小編過來看看吧2018-12-12nginx學(xué)習(xí)總結(jié)五(nginx反向代理)
Nginx代理與負(fù)載均衡配置與優(yōu)化技巧,方便需要的朋友2012-11-11nginx+lua+redis 灰度發(fā)布實現(xiàn)方案
在微服務(wù)化進(jìn)程中,利用nginx+lua+redis實現(xiàn)灰度發(fā)布至關(guān)重要,,通過nginx+lua反向代理,根據(jù)客戶端ip進(jìn)行路由控制,配合redis存儲允許訪問微服務(wù)的ip地址,可以有效地進(jìn)行用戶分流,感興趣的可以了解一下2024-10-10nginx 不同的訪問路徑對應(yīng)項目不同的目錄的實現(xiàn)方法
要在 Nginx 中配置不同的訪問路徑對應(yīng)不同的項目目錄,可以使用 Nginx 的?location?指令來實現(xiàn),本文主要介紹了nginx不同的訪問路徑對應(yīng)項目不同的目錄的實現(xiàn)方法,具有一定的參考價值,感興趣的可以了解一下2023-09-09