golang读取文件的常用方法总结

// * 整个文件读到内存，适用于文件较小的情况
//每次读取固定字节
//问题容易出现乱码，因为中文和中文符号不占一个字符
func readallintomemory(filename string) (content []byte, err error) {
 fp, err := os.open(filename) // 获取文件指针
 if err != nil {
 return nil, err
 }
 defer fp.close()
 fileinfo, err := fp.stat()
 if err != nil {
 return nil, err
 }
 buffer := make([]byte, fileinfo.size())
 _, err = fp.read(buffer) // 文件内容读取到buffer中
 if err != nil {
 return nil, err
 }
 return buffer, nil
}

// * 一块一块地读取, 即给一个缓冲, 分多次读到缓冲中
//按字节读取，将整个文件读取到缓冲区buffer
func readbyblock(filename string) (content []byte, err error) {
 fp, err := os.open(filename) // 获取文件指针
 if err != nil {
 return nil, err
 }
 defer fp.close()
 const buffersize = 64 // 缓冲大小, 每次读取64个字节
 buffer := make([]byte, buffersize)
 for {
 // 注意这里要取bytesread, 否则有问题
 bytesread, err := fp.read(buffer) // 文件内容读取到buffer中
 content = append(content, buffer[:bytesread]...)
 if err != nil {
  if err == io.eof {
  err = nil
  break
  } else {
  return nil, err
  }
 }
 }
 return
}

// 逐行读取, 一行是一个[]byte, 多行就是[][]byte
func readbyline(filename string) (lines [][]byte, err error) {
 fp, err := os.open(filename) // 获取文件指针
 if err != nil {
 return nil, err
 }
 defer fp.close()
 bufreader := bufio.newreader(fp)
 for {
 line, _, err := bufreader.readline() // 按行读
 if err != nil {
  if err == io.eof {
  err = nil
  break
  }
 } else {
  lines = append(lines, line)
 }
 }
 return
}

func test1() {
 bytes,err := ioutil.readfile("filetoread.txt")
 if err != nil {
 log.fatal(err)
 }
 fmt.println("total bytes read：",len(bytes))
 fmt.println("string read:",string(bytes))
}