这篇文章主要介绍“Golang怎么读取单行超长的文本”，在日常操作中，相信很多人在Golang怎么读取单行超长的文本问题上存在疑惑，小编查阅了各式资料，整理出简单好用的操作方法，希望对大家解答”Golang怎么读取单行超长的文本”的疑惑有所帮助！接下来，请跟着小编一起来学习吧！
1.问题复现
首先注释main函数里面的内容，执行 CreateBigText 函数，它会创建一个含有3行内容的文件，第一行是一个长度超过100KB的行。然后解决main函数的注释，尝试执行代码，会发现只有一行错误信息：
package main
import (
"bufio"
"bytes"
"log"
"os"
"strconv"
)
func main() {
file, err := os.Open("./read/test.txt")
if err != nil {
log.Fatal(err)
}
ReadBigText(file)
}
func ReadBigText(file *os.File) {
defer file.Close()
scanner := bufio.NewScanner(file)
for scanner.Scan() {
println(scanner.Text())
}
// 输出错误
println(scanner.Err().Error())
}
func CreateBigText() {
file, err := os.Create("./read/test.txt")
if err != nil {
log.Fatal(err)
}
defer file.Close()
data := make([]byte, 0, 32*1024)
buffer := bytes.NewBuffer(data)
// 构造一个大的单行数据
for i := 0; i < 50000; i++ {
buffer.WriteString(strconv.Itoa(i))
}
// 写入一个换行符
buffer.WriteByte('\n')
buffer.WriteString("I love you yesterday and today!\n")
buffer.WriteString("有一美人兮，见之不忘。\n")
// 将3行写入文件
file.Write(buffer.Bytes())
log.Println("创建文件成功")
}2.问题探究
让我们来探究一下这个问题的原因，首先看一下Scan()方法的注释，这个方法就是每次扫描到下一个token，然后就可以通过获取字节或者文本的方法来获取扫描过的token。如果它返回值是false，就会返回扫描期间遇到的错误，除了io.EOF.
Scan advances the Scanner to the next token, which will then be available through the Bytes or Text method. It returns false when the scan stops, either by reaching the end of the input or an error. After Scan returns false, the Err method will return any error that occurred during scanning, except that if it was io.EOF, Err will return nil. Scan panics if the split function returns too many empty tokens without advancing the input. This is a common error mode for scanners.
所以Scan()和Text()函数是这样结合起来使用的，首先Scan()会扫描出一个token，然后Text()将其转成文本（或者其它方法转成字节），循环执行这种操作就可以按行读取一个文件。
通过阅读Scan()函数的源码，我们可以发现这样一个判断，如果buf的长度大于了最大token长度，那就会报错，见下图。
继续查找，可以看到最大长度已经定义好了，它的长度是 64*1024 byte，即64KB，所以一行文本超过了这个最大长度，那么就会报错！
3.问题解决
其实大部分情况下我们都应该使用Scan()函数结合Text()或者Bytes()函数来读取文件的，这个也是官方推荐的，因为它们是 high-level 方法，用起来很方便。但是如果我们有一些极端的情况，例如单行超过64KB，那么怎么办呢？（这种情况是很少的，但是又有可能会遇到这种需求的，例如文件里面存储了一串Base64编码）
这里可以这样来使用，这个方法不会受到64KB的限制，ReaderString方法会按照指定的定界符来读取一个完整的行，返回值是字符串和读取遇到的错误。如果想要读取返回值为字节的话，可以使用 ReadBytes 方法。
func ReadBigText(file *os.File) {
defer file.Close()
reader := bufio.NewReader(file)
for {
line, err := reader.ReadString('\n')
if err != nil {
log.Fatal(err)
}
fmt.Printf("%d %s", len(line), line)
}
}Golang怎么读取单行超长的文本
