fileutils.go 4.6 KB

123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115116117118119120121122123124125126127128129130131132133134135136137138139140141142143144145146147148149150151152153154155156157158159160161162163164165166167168169170171172173174175176177178179180181182183184185186187188189190191192193194195196197198199200201202203204205206207208209210211212213214215216217218219220221222223224225226227228229230231232233234235236237238239240241242243244245246247248249250251252253254
  1. package fileutils
  2. import (
  3. "archive/zip"
  4. "bytes"
  5. "io"
  6. "log"
  7. "os"
  8. "path/filepath"
  9. "strings"
  10. )
  11. // PathExists 检查对应路径的文件或目录是否存在
  12. // 参数:
  13. // path: 文件或目录的路径
  14. // 返回值:
  15. // 对应路径的文件或目录是否存在
  16. func PathExists(path string) bool {
  17. _, err := os.Stat(path)
  18. if err == nil {
  19. return true
  20. }
  21. if os.IsNotExist(err) {
  22. return false
  23. }
  24. return false
  25. }
  26. // GetDirFiles 获取目录下的文件
  27. // 参数
  28. // dir: 目录的路径
  29. // 返回值:
  30. // 目录下的文件路径(用dir拼接,dir是绝对路径就是绝对路径,dir是相对路径就是相对路径)和错误
  31. func GetDirFiles(dir string) ([]string, error) {
  32. dirList, err := os.ReadDir(dir)
  33. if err != nil {
  34. return nil, err
  35. }
  36. filesRet := make([]string, 0)
  37. for _, file := range dirList {
  38. if file.IsDir() {
  39. files, err := GetDirFiles(filepath.Join(dir, file.Name()))
  40. if err != nil {
  41. return nil, err
  42. }
  43. filesRet = append(filesRet, files...)
  44. } else {
  45. filesRet = append(filesRet, filepath.Join(dir, file.Name()))
  46. }
  47. }
  48. return filesRet, nil
  49. }
  50. // ReadFileWithBuffer 带缓冲读文件,一般用于大文件读取
  51. // 参数
  52. // filePath: 文件的路径
  53. // bufferSize: 缓冲大小,每次最多读取的字节数
  54. // readCallback: 每次读取回调
  55. // 返回值:
  56. // 错误
  57. func ReadFileWithBuffer(filePath string, bufferSize int, readCallback func(b []byte)) error {
  58. file, err := os.Open(filePath)
  59. if err != nil {
  60. return err
  61. }
  62. for {
  63. buffer := make([]byte, bufferSize)
  64. readSize, err := file.Read(buffer)
  65. if err != nil && err != io.EOF {
  66. return err
  67. }
  68. if readCallback != nil {
  69. readCallback(buffer[:readSize])
  70. }
  71. if err != nil && err == io.EOF {
  72. break
  73. }
  74. }
  75. return nil
  76. }
  77. // ZipDir zip压缩目录
  78. // 参数
  79. // dirPath: 目录的路径
  80. // savePath: 生成zip文件的路径
  81. // 返回值:
  82. // 错误
  83. func ZipDir(dirPath string, savePath string) error {
  84. archive, err := os.Create(savePath)
  85. if err != nil {
  86. return err
  87. }
  88. defer func(archive *os.File) {
  89. err := archive.Close()
  90. if err != nil {
  91. log.Println(err)
  92. return
  93. }
  94. }(archive)
  95. zipWriter := zip.NewWriter(archive)
  96. defer func(zipWriter *zip.Writer) {
  97. err := zipWriter.Close()
  98. if err != nil {
  99. log.Println(err)
  100. return
  101. }
  102. }(zipWriter)
  103. err = filepath.Walk(dirPath,
  104. func(path string, f os.FileInfo, err error) error {
  105. if err != nil {
  106. return err
  107. }
  108. if f.IsDir() {
  109. return nil
  110. }
  111. zipPath := strings.TrimPrefix(path, dirPath)
  112. err = writeZipFile(path, zipPath, zipWriter)
  113. if err != nil {
  114. return err
  115. }
  116. return nil
  117. })
  118. if err != nil {
  119. return err
  120. }
  121. return nil
  122. }
  123. // UnzipFile 解压缩zip文件
  124. // 参数
  125. // zipFilePath: zip文件路径
  126. // destDir: 解压缩的目的目录
  127. // 返回值:
  128. // 错误
  129. func UnzipFile(zipFilePath string, destDir string) error {
  130. srcFile, err := os.Open(zipFilePath)
  131. if err != nil {
  132. return err
  133. }
  134. defer func() {
  135. err := srcFile.Close()
  136. if err != nil {
  137. log.Println(err)
  138. return
  139. }
  140. }()
  141. srcFileInfo, err := srcFile.Stat()
  142. if err != nil {
  143. return err
  144. }
  145. return unzip(srcFile, srcFileInfo.Size(), destDir)
  146. }
  147. // UnzipBytes 解压zip文件
  148. // 参数
  149. // zipFileBytes: zip文件的字节内容
  150. // destDir: 解压缩的目的目录
  151. // 返回值:
  152. // 错误
  153. func UnzipBytes(zipFileBytes []byte, destDir string) error {
  154. return unzip(bytes.NewReader(zipFileBytes), int64(len(zipFileBytes)), destDir)
  155. }
  156. func writeZipFile(filePath string, zipPath string, zipWriter *zip.Writer) error {
  157. file, err := os.Open(filePath)
  158. if err != nil {
  159. return err
  160. }
  161. defer func() {
  162. err := file.Close()
  163. if err != nil {
  164. log.Println(err)
  165. return
  166. }
  167. }()
  168. writer, err := zipWriter.Create(zipPath)
  169. if err != nil {
  170. return err
  171. }
  172. _, err = io.Copy(writer, file)
  173. if err != nil {
  174. return err
  175. }
  176. return nil
  177. }
  178. func unzip(r io.ReaderAt, size int64, destDir string) error {
  179. zipReader, err := zip.NewReader(r, size)
  180. if err != nil {
  181. return err
  182. }
  183. for _, f := range zipReader.File {
  184. fPath := filepath.Join(destDir, f.Name)
  185. if f.FileInfo().IsDir() {
  186. if err := os.MkdirAll(fPath, os.ModePerm); err != nil {
  187. return err
  188. }
  189. } else {
  190. if err := os.MkdirAll(filepath.Dir(fPath), os.ModePerm); err != nil {
  191. return err
  192. }
  193. inFile, err := f.Open()
  194. if err != nil {
  195. return err
  196. }
  197. outFile, err := os.OpenFile(fPath, os.O_WRONLY|os.O_CREATE|os.O_TRUNC, f.Mode())
  198. if err != nil {
  199. return err
  200. }
  201. if _, err = io.Copy(outFile, inFile); err != nil {
  202. return err
  203. }
  204. if err = inFile.Close(); err != nil {
  205. return err
  206. }
  207. if err = outFile.Close(); err != nil {
  208. return err
  209. }
  210. }
  211. }
  212. return nil
  213. }