上传者: wangsenling
|
上传时间: 2022-03-24 09:51:47
|
文件大小: 4KB
|
文件类型: -
如需实现大文件迁移到云存储应以四个脚本进程,两个表来处理:
file表,记录文件md5,status
file_chunk表,记录文件的分片开始位置start/分片结束位置end/status/文件的md5
1,第一个进程用来进行对需要下载的所有文件进行分片;
2,第二个进程根据file_chunk存储的分片内容进行分片下载;
3,第三个进程判断file中的文件在file_chunk是否已下载完毕,如下载完毕,则进行合并,合并完成后修改file的status为1
4,第四个进程判断file表的status=1的文件,然后调用阿里云的视频点播脚本,分片上传到阿里云点播系统里(后续开源阿里云点播系统的上传逻辑)