淺談GoLang幾種讀文件方式的比較
更新時間：2019年01月03日 11:40:02 作者：david_je
這篇文章主要介紹了淺談GoLang幾種讀文件方式的比較，一般來說常用的有三種。使用Read加上buffer，使用bufio庫和ioutil 庫，非常具有實用價值，需要的朋友可以參考下
GoLang提供了很多讀文件的方式，一般來說常用的有三種。使用Read加上buffer，使用bufio庫和ioutil 庫。
那他們的效率如何呢？用一個簡單的程序來評測一下：
package main
import(
"fmt"
"os"
"flag"
"io"
"io/ioutil"
"bufio"
"time"
)
func read1(path string)string{
fi,err := os.Open(path)
if err != nil{
panic(err)
}
defer fi.Close()
chunks := make([]byte,1024,1024)
buf := make([]byte,1024)
for{
n,err := fi.Read(buf)
if err != nil && err != io.EOF{panic(err)}
if 0 ==n {break}
chunks=append(chunks,buf[:n]...)
// fmt.Println(string(buf[:n]))
}
return string(chunks)
}
func read2(path string)string{
fi,err := os.Open(path)
if err != nil{panic(err)}
defer fi.Close()
r := bufio.NewReader(fi)
chunks := make([]byte,1024,1024)
buf := make([]byte,1024)
for{
n,err := r.Read(buf)
if err != nil && err != io.EOF{panic(err)}
if 0 ==n {break}
chunks=append(chunks,buf[:n]...)
// fmt.Println(string(buf[:n]))
}
return string(chunks)
}
func read3(path string)string{
fi,err := os.Open(path)
if err != nil{panic(err)}
defer fi.Close()
fd,err := ioutil.ReadAll(fi)
// fmt.Println(string(fd))
return string(fd)
}
func main(){
flag.Parse()
file := flag.Arg(0)
f,err := ioutil.ReadFile(file)
if err != nil{
fmt.Printf("%s\n",err)
panic(err)
}
fmt.Println(string(f))
start := time.Now()
read1(file)
t1 := time.Now()
fmt.Printf("Cost time %v\n",t1.Sub(start))
read2(file)
t2 := time.Now()
fmt.Printf("Cost time %v\n",t2.Sub(t1))
read3(file)
t3 := time.Now()
fmt.Printf("Cost time %v\n",t3.Sub(t2))
}
運(yùn)行命令go run read.go filename, 制定需要讀取的文件就可以了。這里我比較了讀取13.7MB的日志文件，三種方式分別消耗的時間是：
Cost time 105.006ms Cost time 68.0039ms Cost time 31.0018ms
讀取29.3MB的媒體文件：
Cost time 390.0223ms Cost time 194.0111ms Cost time 83.0048ms
讀取302MB的媒體文件
Cost time 40.8043338s Cost time 1m5.0407201s Cost time 8.8155043s
這個差距就很明顯了，ioutil提供的方法效率就是高。有空可以再從代碼層面再去分析一下。
以上就是本文的全部內(nèi)容，希望對大家的學(xué)習(xí)有所幫助，也希望大家多多支持腳本之家。
相關(guān)文章
這篇文章主要介紹了如何解決goland,idea全局搜索快捷鍵失效問題，快捷鍵失效，可能是快捷鍵沖突，也或者是快捷鍵被修改成其他了。在settings下查看快捷鍵是否被修改,下文詳細(xì)介紹需要的朋友可以參考下2022-04-04
一文帶你理解Golang中的Time結(jié)構(gòu)
根據(jù)golang的time包的文檔可以知道,golang的time結(jié)構(gòu)中存儲了兩種時鐘,一種是Wall?Clocks,一種是Monotonic?Clocks,下面我們就來簡單了解一下這兩種結(jié)構(gòu)吧2023-09-09
本文主要介紹了go語言中如何使用select的實現(xiàn)示例，文中通過示例代碼介紹的非常詳細(xì)，對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值，需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2022-05-05
token指的是一種用于驗證用戶身份或授權(quán)訪問的憑證,本文主要介紹了Golang使用Token來驗證,具有一定的參考價值,感興趣的可以了解一下2024-08-08
一文帶你探索Go語言中crypto/md5標(biāo)準(zhǔn)庫的強(qiáng)大功能
我們將從MD5算法的基礎(chǔ)知識入手,逐步深入到如何在Go中有效使用crypto/md5標(biāo)準(zhǔn)庫,包括基本的使用方法、實際應(yīng)用案例分析,以及性能和安全性的考量,需要的可以參考下2024-02-02
RPC是遠(yuǎn)程過程調(diào)用,可以像調(diào)用本地服務(wù)一樣取調(diào)用遠(yuǎn)程服務(wù),本文主要介紹了go grpc高級用法,具有一定的參考價值,感興趣的可以了解一下2024-01-01
詳解Golang實現(xiàn)http重定向https的方式
這篇文章主要介紹了詳解Golang實現(xiàn)http重定向https的方式，小編覺得挺不錯的，現(xiàn)在分享給大家，也給大家做個參考。一起跟隨小編過來看看吧2018-08-08
本文主要介紹了go寫文件后出現(xiàn)大量NUL字符問題解決,由于每次寫的時候設(shè)置的長度都是64,在某次不足64時,byte切片空余位置被填充為空字符,下面就來介紹一下如何解決2023-12-12
這篇文章主要給大家介紹了關(guān)于Golang處理parquet文件的相關(guān)資料,文中通過實例代碼介紹的非常詳細(xì),對大家學(xué)習(xí)或者使用Golang具有一定的參考學(xué)習(xí)價值,需要的朋友可以參考下2023-03-03
Go語言數(shù)據(jù)結(jié)構(gòu)之二叉樹可視化詳解
這篇文章主要為大家詳細(xì)介紹了Go語言數(shù)據(jù)結(jié)構(gòu)中二叉樹可視化的方法詳解，文中的示例代碼講解詳細(xì)，感興趣的小伙伴可以跟隨小編一起學(xué)習(xí)一下2022-09-09