golang使用SQLite数据库对指定扩展名文件进行批量加密（四、大文件读取）

咸甜适中

已于 2022-01-20 09:37:27 修改

阅读量752

点赞数

CC 4.0 BY-SA版权

分类专栏： golang go语言文章标签： golang 数据库 sqlite

于 2022-01-20 09:23:55 首次发布

本文链接：https://blog.youkuaiyun.com/qq_30712797/article/details/122594324

golang 同时被 2 个专栏收录

30 篇文章

订阅专栏

go语言

30 篇文章

订阅专栏

本文介绍了一种通过缓存来高效读取大文件的方法。使用Go语言中的bufio包创建读取器，并设置缓存大小，以平衡内存占用与读取速度。通过循环读取直至文件末尾，实现对大文件的有效处理。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

使用缓存读取大文件，详见代码。

package main

import (
	"bufio"
	"fmt"
	"io"
	"os"
)

func main() {
	file, err1 := os.Open("XXXXX.mp4")     // 只读方式打开文件
	if err1 != nil {                       // 文件打开错误
		fmt.Println("打开文件错误！")
	}
	defer file.Close() // 延迟关闭文件
	read := bufio.NewReader(file)         // 创建读取器

	// 创建读取缓存。
	// 数值越大，一次读取的数据量越大，占用内存越大，读取次数减少，读取越快。
	// 数值越小，一次读取的数据量越小，占用内存越小，读取次数增加，读取越慢。
	buf := make([]byte, 1024)

	for { // 循环读取数据
		n, err2 := read.Read(buf)          // 读取数据到缓存，n为读取到的数据长度
		if err2 != nil {                   // 读取错误
			if err2 == io.EOF {            // 读取完毕
				fmt.Println("文件读取完毕！")
			} else {
				fmt.Println("文件读取错误！")
			}
			break                         // 结束读取循环
		}
		fmt.Println("读取到的数据长度为：", n)
		fmt.Println("本次读取的的数据为（字节数组）：", buf[:n])
        // 因为最后一次读取数据时 n<=设置的缓存 所以使用 buf[:n]，确保数据一致性。
	}
}