大文件上传怎么提速

查看 64|回复 2
作者:pppouj   
对于 zip 文件的上传需要进行内容的验证和解析。
1 、目前的方案是先上传到文件服务器后,在将文件从硬盘加载在内存中进行逻辑提取部分重要信息处理后删除。
2 、有什么好的加速方式吗?目前想到只有分片上传
3 、语言不限

上传, 文件, 分片, zip

opengps   
提取的内容是啥?有些基础信息只需要读取前面多少个字节就可以
如果必须全量上传,分片的目的未必是提速,可能只是为了削弱压力峰值
jones2000   
本地先初略分析一遍, 去掉无用的数据, 再切片,切片的时候根据实际场景,分有关联的切片(必须 1 ,2 ,3 切片顺序分析),独立切片( 1 ,2 ,3 切换可以独立分析,没有顺序)等等。每个切片单独 zip ,多线程同步上传。这样上传 1 个切片就可以分析一个,提高速度。
您需要登录后才可以回帖 登录 | 立即注册

返回顶部