淺談GoLang幾種讀文件方式的比較
更新時間：2019年01月03日 11:40:02 作者：david_je
這篇文章主要介紹了淺談GoLang幾種讀文件方式的比較，一般來說常用的有三種。使用Read加上buffer，使用bufio庫和ioutil 庫，非常具有實用價值，需要的朋友可以參考下
GoLang提供了很多讀文件的方式，一般來說常用的有三種。使用Read加上buffer，使用bufio庫和ioutil 庫。
那他們的效率如何呢？用一個簡單的程序來評測一下：
package main
import(
"fmt"
"os"
"flag"
"io"
"io/ioutil"
"bufio"
"time"
)
func read1(path string)string{
fi,err := os.Open(path)
if err != nil{
panic(err)
}
defer fi.Close()
chunks := make([]byte,1024,1024)
buf := make([]byte,1024)
for{
n,err := fi.Read(buf)
if err != nil && err != io.EOF{panic(err)}
if 0 ==n {break}
chunks=append(chunks,buf[:n]...)
// fmt.Println(string(buf[:n]))
}
return string(chunks)
}
func read2(path string)string{
fi,err := os.Open(path)
if err != nil{panic(err)}
defer fi.Close()
r := bufio.NewReader(fi)
chunks := make([]byte,1024,1024)
buf := make([]byte,1024)
for{
n,err := r.Read(buf)
if err != nil && err != io.EOF{panic(err)}
if 0 ==n {break}
chunks=append(chunks,buf[:n]...)
// fmt.Println(string(buf[:n]))
}
return string(chunks)
}
func read3(path string)string{
fi,err := os.Open(path)
if err != nil{panic(err)}
defer fi.Close()
fd,err := ioutil.ReadAll(fi)
// fmt.Println(string(fd))
return string(fd)
}
func main(){
flag.Parse()
file := flag.Arg(0)
f,err := ioutil.ReadFile(file)
if err != nil{
fmt.Printf("%s\n",err)
panic(err)
}
fmt.Println(string(f))
start := time.Now()
read1(file)
t1 := time.Now()
fmt.Printf("Cost time %v\n",t1.Sub(start))
read2(file)
t2 := time.Now()
fmt.Printf("Cost time %v\n",t2.Sub(t1))
read3(file)
t3 := time.Now()
fmt.Printf("Cost time %v\n",t3.Sub(t2))
}
運行命令go run read.go filename, 制定需要讀取的文件就可以了。這里我比較了讀取13.7MB的日志文件，三種方式分別消耗的時間是：
Cost time 105.006ms Cost time 68.0039ms Cost time 31.0018ms
讀取29.3MB的媒體文件：
Cost time 390.0223ms Cost time 194.0111ms Cost time 83.0048ms
讀取302MB的媒體文件
Cost time 40.8043338s Cost time 1m5.0407201s Cost time 8.8155043s
這個差距就很明顯了，ioutil提供的方法效率就是高。有空可以再從代碼層面再去分析一下。
以上就是本文的全部內(nèi)容，希望對大家的學習有所幫助，也希望大家多多支持腳本之家。
相關文章
Go控制并發(fā)有三種經(jīng)典的方式,使用?channel?通知實現(xiàn)并發(fā)控制、使用 sync 包中的?WaitGroup?實現(xiàn)并發(fā)控制、使用?Context?上下文實現(xiàn)并發(fā)控制,下面就來介紹一下2024-08-08
在Go語言開發(fā)中,依賴管理是一項非常重要的工作,Go mod作為官方的包管理工具已經(jīng)成為了Go語言依賴管理的首選方式,本文就來介紹一下go mod 依賴管理的具體使用,具有一定的參考價值,感興趣的可以了解一下2024-01-01
這篇文章主要介紹了GoLand如何設置中文,本文通過圖文并茂的形式給大家介紹的非常詳細，對大家的學習或工作具有一定的參考借鑒價值，需要的朋友可以參考下2020-12-12
本文詳細講解了go語言中的協(xié)程，文中通過示例代碼介紹的非常詳細。對大家的學習或工作具有一定的參考借鑒價值，需要的朋友可以參考下2022-07-07
這篇文章主要介紹了go切片的copy和view的使用方法，文中通過示例代碼介紹的非常詳細，對大家的學習或者工作具有一定的參考學習價值，需要的朋友們下面隨著小編來一起學習學習吧2019-11-11
這篇文章主要介紹了GoLang sync.Pool簡介與用法，Pool是可伸縮、并發(fā)安全的臨時對象池，用來存放已經(jīng)分配但暫時不用的臨時對象，通過對象重用機制，緩解GC壓力，提高程序性能2023-01-01
淺談golang package中init方法的多處定義及運行順序問題
這篇文章主要介紹了淺談golang package中init方法的多處定義及運行順序問題，具有很好的參考價值，希望對大家有所幫助。一起跟隨小編過來看看吧2021-05-05
Golang利用channel協(xié)調(diào)協(xié)程的方法詳解
go?當中的并發(fā)編程是通過goroutine來實現(xiàn)的，利用channel（管道）可以在協(xié)程之間傳遞數(shù)據(jù)，所以本文就來講講Golang如何利用channel協(xié)調(diào)協(xié)程吧2023-05-05
在本文中,我們將從基礎概念、常規(guī)操作,到高級技巧和特殊操作,帶大家深入了解Go語言中數(shù)組的各個方面,感興趣的小伙伴可以跟隨小編一起學習一下2023-10-10
這篇文章主要給大家介紹了關于使用go連接clickhouse的實戰(zhàn)操作,文中通過實例代碼介紹的非常詳細,對大家學習或者使用go具有一定的參考學習價值,需要的朋友可以參考下2023-03-03