Golang实现按行读取文件的方法小结

这篇文章将为大家详细讲解有关Golang实现按行读取文件的方法小结，小编觉得挺实用的，因此分享给大家做个参考，希望大家阅读完这篇文章后可以有所收获。

按行读取文件

在 Go 中，按行读取文件可以使用多种方法，每种方法各有优缺点：

bufio.Scanner

bufio.Scanner 是一个用于从输入（例如文件）逐行读取文本的包。它提供了一个简单的 API，支持控制读取时的分隔符和缓冲区大小。

package main

import (
    "bufio"
    "fmt"
    "os"
)

func main() {
    file, err := os.Open("myfile.txt")
    if err != nil {
        fmt.Println(err)
        return
    }
    defer file.Close()

    scanner := bufio.NewScanner(file)
    for scanner.Scan() {
        fmt.Println(scanner.Text())
    }
    if err := scanner.Err(); err != nil {
        fmt.Println(err)
    }
}

io.ReadLines

io.ReadLines 函数在 Go 1.18 中引入，它将整个文件读入内存，然后按行分割。对于较小的文件，它比 bufio.Scanner 更高效。

package main

import (
    "fmt"
    "io/ioutil"
    "strings"
)

func main() {
    data, err := ioutil.ReadFile("myfile.txt")
    if err != nil {
        fmt.Println(err)
        return
    }
    lines := strings.Split(string(data), "
")
    for _, line := range lines {
        fmt.Println(line)
    }
}

os.ReadFile

os.ReadFile 函数将整个文件读入内存并返回文件内容作为字节切片。您可以使用 strings.Split 或 bufio.Scanner 将其进一步按行分割。

package main

import (
    "fmt"
    "os"
    "strings"
)

func main() {
    data, err := os.ReadFile("myfile.txt")
    if err != nil {
        fmt.Println(err)
        return
    }
    lines := strings.Split(string(data), "
")
    for _, line := range lines {
        fmt.Println(line)
    }
}

文件流

在 Go 中，文件是一个文件流，它实现 io.Reader 接口，您可以使用 io.ReadLine 函数按行读取文件。

package main

import (
    "fmt"
    "io"
    "os"
)

func main() {
    file, err := os.Open("myfile.txt")
    if err != nil {
        fmt.Println(err)
        return
    }
    defer file.Close()

    for {
        line, err := io.ReadLine(file, bufio.MaxScanTokenSize)
        if err == io.EOF {
            break
        }
        if err != nil {
            fmt.Println(err)
            return
        }
        fmt.Println(line)
    }
}

性能比较

对于较小的文件，io.ReadLines 和 bufio.Scanner 性能相似。对于较大的文件，io.ReadLines 更高效，因为它一次将整个文件读入内存。os.ReadFile 通常比其他方法慢，因为它需要多次往返文件系统。

选择方法

选择哪种方法取决于文件的特点和性能要求：

• 较小的文件（<10MB）： 使用 io.ReadLines 或 bufio.Scanner。
• 较大的文件（>10MB）： 使用 io.ReadLines，但需要注意内存限制。
• 需要高级功能： 使用 bufio.Scanner，因为它支持自定义分隔符和缓冲区大小。

以上就是Golang实现按行读取文件的方法小结的详细内容，更多请关注编程学习网其它相关文章！