1. 首页
  2. 编程语言
  3. 其他
  4. Golang 实现超大文件读取的两种方法

Golang 实现超大文件读取的两种方法

上传者: 2022-08-02 11:58:57上传 PDF文件 86.73 KB 热度 19次

Golang超大文件读取的两个方案去年的面试中我被问到超大文件你怎么处理,这个问题确实当时没多想,回来之后仔细研究和讨论了下这个问题,对大文件读取做了一个分析比如我们有一个log文件,运行了几年,有100G之大。按照我们之前的操作可能代码会这样写:上面的代码读取几兆的文件可以,但是如果大于你本身及其内存,那就直接翻车了。那么,正确的方法有两种第一个是使用流处理方式代码如下第二个方案就是分片处理当读取的是二进制文件,没有换行符的时候,使用下面的方案一样处理大文件看代码吧~

下载地址
用户评论