Go语言中逐行读取文件的完整实践指南

本文详解如何在go中高效、安全地逐行读取文本文件，涵盖标准库bufio.scanner的核心用法、常见陷阱、错误处理及性能优化建议。

本文详解如何在go中高效、安全地逐行读取文本文件，涵盖标准库bufio.scanner的核心用法、常见陷阱、错误处理及性能优化建议。

在Go语言中，“逐行读取文件”并非通过传统C风格的while (!EOF)循环实现，而是依托bufio.Scanner这一专为分词（包括按行切分）设计的高效、内存友好的工具。它内部自动处理缓冲、换行符识别（支持n、rn）和边界情况，是官方推荐的标准做法。

以下是最简洁可靠的逐行读取示例：

package main  import (     "bufio"     "fmt"     "os" )  func main() {     file, err := os.Open("path/to_file")     if err != nil {         panic(fmt.Sprintf("无法打开文件: %v", err))     }     defer file.Close() // 关键：务必关闭文件句柄      scanner := bufio.NewScanner(file)     for scanner.Scan() {         line := scanner.Text() // 获取当前行（不含换行符）         fmt.Println(line)     }      // 检查扫描过程中是否发生错误（如I/O错误）     if err := scanner.Err(); err != nil {         panic(fmt.Sprintf("读取文件时出错: %v", err))     } }

✅ 关键要点说明：

• 必须显式检查 scanner.Err()：scanner.Scan() 仅返回bool表示是否成功读到下一行，但不暴露底层I/O错误；忽略此检查可能导致静默失败。
• 务必调用 file.Close()：使用defer确保资源及时释放，避免文件描述符泄漏。
• scanner.Text() 返回无换行符字符串：若需保留原始换行符，可改用 scanner.Bytes() 并手动追加（如 append(lineBytes, ‘n’)）。

⚠️ 注意事项与进阶建议：

立即学习“go语言免费学习笔记（深入）”；

• 超长行处理：默认情况下，Scanner 单行上限为 64KB。若需读取超长行（如日志或json行），应预先设置缓冲区：

  scanner.Buffer(make([]byte, 0, 1024*1024), 1024*1024) // 支持最大1MB行

• 替代方案对比：
  • bufio.Reader.ReadString(‘n’) 更底层、更灵活（可自定义分隔符），但需手动处理io.EOF和错误；
  • bytes.Split(bytes, []byte{‘n’}) 适用于小文件内存加载场景，不适用于大文件流式处理。
• 编码兼容性：bufio.Scanner 原生只处理UTF-8字节流。若需读取GBK、UTF-16等编码，需先用golang.org/x/text/encoding包解码后再扫描。

总之，bufio.Scanner 是Go中逐行读取文件的首选方案——它兼顾简洁性、安全性与性能。掌握其正确用法（尤其错误检查与资源管理），是编写健壮Go I/O程序的基础能力。