前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >golang 大文件分割

golang 大文件分割

原创
作者头像
大师级码师
修改2021-11-02 10:57:31
1.8K0
修改2021-11-02 10:57:31
举报
文章被收录于专栏:大师级码师

golang 大文件分割

代码语言:javascript
复制
package main
import (
    "fmt"
    "io/ioutil"
    "math"
    "os"
    "strconv"
)
const chunkSize int64 = 4 << 20
func main() {
    fileInfo, err := os.Stat("test.zip")
    if err != nil {
        fmt.Println(err)
    }

num := int(math.Ceil(float64(fileInfo.Size()) / float64(chunkSize)))

fi, err := os.OpenFile("test.zip", os.O_RDONLY, os.ModePerm)
if err != nil {
    fmt.Println(err)
    return
}
b := make([]byte, chunkSize)
var i int64 = 1
for ; i <= int64(num); i++ {

    fi.Seek((i-1)*(chunkSize), 0)

    if len(b) > int((fileInfo.Size() - (i-1)*chunkSize)) {
        b = make([]byte, fileInfo.Size()-(i-1)*chunkSize)
    }

    fi.Read(b)

    f, err := os.OpenFile("./"+strconv.Itoa(int(i))+".db", os.O_CREATE|os.O_WRONLY, os.ModePerm)
    if err != nil {
        fmt.Println(err)
        return
    }
    f.Write(b)
    f.Close()
}
fi.Close()
fii, err := os.OpenFile("test.zip", os.O_CREATE|os.O_WRONLY|os.O_APPEND, os.ModePerm)
if err != nil {
    fmt.Println(err)
    return
}
for i := 1; i <= num; i++ {
    f, err := os.OpenFile("./"+strconv.Itoa(int(i))+".db", os.O_RDONLY, os.ModePerm)
    if err != nil {
        fmt.Println(err)
        return
    }
    b, err := ioutil.ReadAll(f)
    if err != nil {
        fmt.Println(err)
        return
    }
    fii.Write(b)
    f.Close()
}
 
}</pre> 

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档