Golang 文件读取

来源：互联网发布：网络代销免费货源编辑：程序博客网时间：2024/05/22 04:38

转载自：http://david-je.iteye.com/blog/1988940

GoLang提供了很多读文件的方式，一般来说常用的有三种。使用Read加上buffer，使用bufio库和ioutil 库。

那他们的效率如何呢？用一个简单的程序来评测一下：

package mainimport(    "fmt"    "os"    "flag"    "io"    "io/ioutil"    "bufio"    "time")func read1(path string)string{    fi,err := os.Open(path)    if err != nil{        panic(err)    }    defer fi.Close()    chunks := make([]byte,1024,1024)    buf := make([]byte,1024)    for{        n,err := fi.Read(buf)        if err != nil && err != io.EOF{panic(err)}        if 0 ==n {break}        chunks=append(chunks,buf[:n]...)        // fmt.Println(string(buf[:n]))    }    return string(chunks)}func read2(path string)string{    fi,err := os.Open(path)    if err != nil{panic(err)}    defer fi.Close()    r := bufio.NewReader(fi)        chunks := make([]byte,1024,1024)         buf := make([]byte,1024)    for{        n,err := r.Read(buf)        if err != nil && err != io.EOF{panic(err)}        if 0 ==n {break}        chunks=append(chunks,buf[:n]...)        // fmt.Println(string(buf[:n]))    }    return string(chunks)}func read3(path string)string{    fi,err := os.Open(path)    if err != nil{panic(err)}    defer fi.Close()    fd,err := ioutil.ReadAll(fi)    // fmt.Println(string(fd))    return string(fd)}func main(){       flag.Parse()    file := flag.Arg(0)    f,err := ioutil.ReadFile(file)    if err != nil{    fmt.Printf("%s\n",err)    panic(err)    }    fmt.Println(string(f))    start := time.Now()    read1(file)    t1 := time.Now()    fmt.Printf("Cost time %v\n",t1.Sub(start))    read2(file)    t2 := time.Now()    fmt.Printf("Cost time %v\n",t2.Sub(t1))    read3(file)    t3 := time.Now()    fmt.Printf("Cost time %v\n",t3.Sub(t2))}

运行命令go run read.go filename, 制定需要读取的文件就可以了。这里我比较了读取13.7MB的日志文件，三种方式分别消耗的时间是：

Go代码

Cost time 105.006ms
Cost time 68.0039ms
Cost time 31.0018ms

读取29.3MB的媒体文件：

Go代码

Cost time 390.0223ms
Cost time 194.0111ms
Cost time 83.0048ms

读取302MB的媒体文件

Go代码

Cost time 40.8043338s
Cost time 1m5.0407201s
Cost time 8.8155043s

这个差距就很明显了，ioutil提供的方法效率就是高。有空可以再从代码层面再去分析一下。

0 0